SEO Сообщество: Спрашивайте и помогайте

Присоединяйтесь к сообществу профессиональных веб-мастеров PR-CY, отвечайте на вопросы коллег и задавайте свои.

Q&A SEO

Robots.txt. Как настроить редирект?

Fargoname Fargoname  
27
  16.04.2017 17:35       4 389    
Такая проблема. Перешел недавно на https, настроил все как надо. Склеил домен, редирект настроил. Но проходит пару дней в яндексе появляются , то дубли страниц, то вообще не идексируют. Зашел в вебмастер, смотрю, мол критическая ошибка robots отвечает редиректом. Убрал редирект с .htaccess. Теперь в google сайт открывается в http. Теперь сам вопрос, как правильно настроить редирект, что бы яндекс мог robots.txt анализировать

С уважением и надеюсь на вашу помощь

Ответы на пост (6) Написать ответ
Sergexpert Sergexpert
451
16.04.2017 17:41
По началу так и должно быть. Будут приходить всякие сообщение, которые можно смело игнорировать. Это скорее всего они сообщаю о старой версии. У меня так было на всех сайтах по началу.
0
Fargoname Fargoname
27
16.04.2017 17:51
А ошибка с "Найдено несколько директив Host" стоит бороться или игнорировать?
0
boav boav
61
16.04.2017 17:45
В htaccess впиши

<FilesMatch "robots.txt$">
RewriteEngine off
</FilesMatch>
0
Pushandthink Wow Pushandthink Wow
18
16.04.2017 19:22
У меня такой. Полные редиректы с www. на без и с https://www на без. Мозги парил пару дней ))

DirectoryIndex index.php

RewriteEngine on
RewriteBase /
RewriteCond %{HTTP_HOST} ^www\.(.*)$ [NC]
RewriteRule ^(.*)$ https://%1/$1 [R=301,L]
RewriteCond %{REQUEST_FILENAME} !-f
RewriteCond %{REQUEST_FILENAME} !-d
RewriteCond $1 !^(index\.php|robots\.txt)

RewriteRule ^(.*)$ index.php?/$1 [L]



RewriteEngine On
RewriteCond %{SERVER_PORT} !^443$
RewriteRule .* https://%{SERVER_NAME}%{REQUEST_URI} [R=301,L]


<FilesMatch "robots.txt$">
RewriteEngine off
</FilesMatch>
0
ToXaD3 ToXaD3
214
17.04.2017 05:56
Какой бред вверху. Выложите свой роботс и свою CMS.
0
Вилы Выкидные Вилы Выкидные
28
17.04.2017 11:37
Странный вопрос после того, как склеил домен )))
0