Robots.txt. Как настроить редирект?

Fargoname Fargoname   16.04.2017 17:35   318  
Такая проблема. Перешел недавно на https, настроил все как надо. Склеил домен, редирект настроил. Но проходит пару дней в яндексе появляются , то дубли страниц, то вообще не идексируют. Зашел в вебмастер, смотрю, мол критическая ошибка robots отвечает редиректом. Убрал редирект с .htaccess. Теперь в google сайт открывается в http. Теперь сам вопрос, как правильно настроить редирект, что бы яндекс мог robots.txt анализировать

С уважением и надеюсь на вашу помощь
0
Ответы на вопрос (5) Написать ответ
Sergexpert
0
Sergexpert   16.04.2017 17:41
По началу так и должно быть. Будут приходить всякие сообщение, которые можно смело игнорировать. Это скорее всего они сообщаю о старой версии. У меня так было на всех сайтах по началу.
Sergexpert
Fargoname   16.04.2017 17:51  
А ошибка с "Найдено несколько директив Host" стоит бороться или игнорировать?
boav
0
boav   16.04.2017 17:45
В htaccess впиши

<FilesMatch "robots.txt$">
RewriteEngine off
</FilesMatch>
Pushandthink Wow
0
Pushandthink Wow   16.04.2017 19:22
У меня такой. Полные редиректы с www. на без и с https://www на без. Мозги парил пару дней ))

DirectoryIndex index.php

RewriteEngine on
RewriteBase /
RewriteCond %{HTTP_HOST} ^www\.(.*)$ [NC]
RewriteRule ^(.*)$ https://%1/$1 [R=301,L]
RewriteCond %{REQUEST_FILENAME} !-f
RewriteCond %{REQUEST_FILENAME} !-d
RewriteCond $1 !^(index\.php|robots\.txt)

RewriteRule ^(.*)$ index.php?/$1 [L]



RewriteEngine On
RewriteCond %{SERVER_PORT} !^443$
RewriteRule .* https://%{SERVER_NAME}%{REQUEST_URI} [R=301,L]


<FilesMatch "robots.txt$">
RewriteEngine off
</FilesMatch>
ToXaD3
0
ToXaD3   17.04.2017 05:56
Какой бред вверху. Выложите свой роботс и свою CMS.
Вилы Выкидные
0
Вилы Выкидные   17.04.2017 11:37
Странный вопрос после того, как склеил домен )))

Войдите, чтобы написать ответ
Вход Регистрация



Хостинг на SSD для успешного SEO продвижения - 199 руб./мес (33 GB SSD / Доменов и сайтов не ограничено)