SEO Сообщество: Спрашивайте и помогайте

Присоединяйтесь к сообществу профессиональных веб-мастеров PR-CY, отвечайте на вопросы коллег и задавайте свои.

Q&A SEO

Приоритет между robots.txt и содержимым sitemap.xml

Андрей Тараненко Андрей Тараненко  
0
  28.10.2015 12:52       1 276    
распространяются ли правила robots.txt на содержимое файла sitemap.xml, который прикреплен в этом файле? Например есть запись в роботс.тхт 
Disallow: /catalog1/
и в sitemap.xml есть проиндексированная запись
<loc>site.ru/catalog1/</loc>.
Что увидит робот? у кого приоритет?

Ответы на пост (3) Написать ответ
TBicT TBicT
180
28.10.2015 13:09
Robots.txt приоритетней
1
Chuvachok Chuvachok
1124
28.10.2015 23:17
Ничего не увидит, когда робот видит Disallow, он закрывает глаза и вслепую ходит по site.ru/catalog1/ в sitemap.xml
1
спасибо за ответы :)
0