Нужно ли в robots.txt указывать главное зеркало сайта?

Question

Нужно ли в robots.txt указывать главное зеркало сайта?

Нужно ли в файле robots.txt указывать главное зеркало сайта?
На данный момент и в яндекс и в гугл выбрана опция на усмотрение робота, и главным зеркалом считается http а с www стоит редирект 301 на http.

0

Ответы на пост (12) Написать ответ

Быстрая регистрация для ответа Войти

Answer 1

О чем вы??? Есть понятие site.ru или www.site.ru это и указывается в роботс, в гугл ВМ и яндекс ВМ. HTTP и HTTPS это протоколы и это совсем отдельная тема.

Answer 2

Спасибо что поправили. Не правильно описал вопрос. в роботс не указано главное зеркало, а гугл и яндекс главным считает site.ru а с www.site.ru редирект 301 на site.ru

Answer 3

Ну если редирект стоит, то правильно они считают. А в роботсе все равно желательно прописать, там одна строчка, чего гадать то, прописал и забыл.

Answer 4

rus85

16

24.08.2016 19:45

в роботс прописать: Host: site.ru ?

0

Answer 5

tryam

138

25.08.2016 07:18

Да все верно, протокол указывать не нужно.

0

Answer 6

В роботсе обязтельно указание главного зеркала. Независмо от вебмастера яндекса\гугла.

host: http://site.ru

Answer 7

rus85

16

24.08.2016 22:12

зачем http ?

0

Answer 8

затем что еще есть www и может быть https
Вы же указываете главным одно из зеркал. А по факту у вас их два:
www - неглавное и http - главное. Вот его и надо указать.

Answer 9

rus85

16

24.08.2016 22:12

если сам не знаешь, не пиши

0

Answer 10

Ты пьян? Тебе ответили. После этого ты или скажи спасибо, или дальше иди куда шел.

Answer 11

rus85

16

25.08.2016 09:35

ЧИТАЙ!!! https://yandex.ru/support/webmaster/controlling-robot/robots-txt.xml#host

0

Answer 12

Tornado007

10

25.08.2016 10:07

Я при переклейки домена, в роботсе указывал главное зеркало.

0

Нужно ли в robots.txt указывать главное зеркало сайта?

Похожие посты

Анализ сайта