SEO Сообщество: Спрашивайте и помогайте

Присоединяйтесь к сообществу профессиональных веб-мастеров PR-CY, отвечайте на вопросы коллег и задавайте свои.

Q&A SEO

Sitemap vs дубликатов

laim200 laim200  
1
  05.03.2016 21:46       773     Помощь  
Всем добрый вечер!
Вопрос:
В sitemap нет дубликатов страниц, но страницы по старым "категориям/урл" доступны. При индексировании сайта роботы ПС будут индексировать страницы, которых нет Sitemap? Если да, то приоритет будет выше на страницы, которые в sitemap прописаны? Либо роботам без разницы на sitemap, и они все ссылки (внутренние) подряд индексируют, на которых не получен ответ 404?
Зарание спасибо!

Ответы на пост (4) Написать ответ
uVay uVay
36
05.03.2016 22:56
без разницы. проиндексируют все со временем. Настройте файл robots.txt
1
laim200 laim200
1
05.03.2016 23:37
спасибо, сделал все в робот.тхт ввида Disallow: /copy_categori/*
0
erika74 erika74
26
05.03.2016 23:14
Гуглите про канонические урлы.
0
Chuvachok Chuvachok
1134
06.03.2016 23:40
Причём тут sitemap ??? К вам когда домой кто-нибудь заходит, вы даёте карту вашей квартиры?
Так и роботу нах она не нужна ... роботс тхт надо настраивать, а не с картой бегать и сувать под нос поисковику
0