Для того что бы запретить индексацию сайта по протоколу https , необходимо сделать следующее:
Создать файл robots-https.txt в папке сайта, там же где и robots.txt (если есть)
В файл robots-https.txt добавить следующий код:
User-agent: * Disallow: /
Создать или открыть файл .htaccess , в него добавить следующий код:
RewriteEngine on
RewriteCond %{HTTPS} on
RewriteRule ^robots\.txt$ robots-https.txt