Нужно ли открыть доступ к robots.txt?

Jasper Jasper   09.05.2017 15:10   930  
Добрый день. Перевел сайт на https, но теперь в яндекс вебмастере есть https://сайт и зеркало https://сайт И вот в http теперь нет доступа к robots.txt. Стоит ли его открывать отдельно и как это сделать? 
Редирект настроен с помощью htaccess: 

RewriteEngine On
RewriteCond %{HTTPS} off
RewriteCond %{HTTP:X-Forwarded-Proto} !https
RewriteRule ^(.*)$ https://%{HTTP_HOST}%{REQUEST_URI} [L,R=301]

Нашел вот такой вот вариант, но не стал экспериментировать
RewriteEngine On
RewriteBase /<br>RewriteCond %{HTTP:X-HTTPS} !1<br>RewriteCond %{REQUEST_URI} !^/robots.txt$<br>RewriteRule ^(.*)$ <a href="https://pr-cy.ru/jump/?url=https%3A%2F%241" target="_blank">https://%{HTTP_HOST}/ </a> [R=301,L]

Ответы на вопрос (3) Написать ответ
vituson vituson   09.05.2017 15:39
У меня на 2-х сайтах такой, проблем нет.

RewriteEngine On
RewriteCond %{HTTPS} =off
RewriteCond %{REQUEST_URI} !^/robots.txt
RewriteRule (.*) https://%{HTTP_HOST}%{REQUEST_URI} [QSA,L]
0
santa91 santa91   09.05.2017 19:38
жди, как только яндекс переклеет домен, ошибка пропадет. Тоже была такая проблема при переходе.
0
Jasper Jasper   09.05.2017 19:40
Домен переклеил. И как я редирект сделал сразу появилась ошибка.
0

Войдите, чтобы написать ответ
Вход Регистрация

Медленные сайты убивают! Закажи быстрый хостинг на CloudLinux и SSD-дисках. Более 15 стран для размещения вашего сайта.