SEO Сообщество: Спрашивайте и помогайте

Присоединяйтесь к сообществу профессиональных веб-мастеров PR-CY, отвечайте на вопросы коллег и задавайте свои.

Зарегистрироваться Войти
Q&A SEO
  1. Сообщество
  2. Вопросы и ответы
  3. Нужен ли обязательно robots.txt?

Нужен ли обязательно robots.txt?

Logan9991 Logan9991  
14
  04.05.2013 00:34       1 186    
Я заметил, что Яндекс самостоятельно убирает дубли страниц. То-есть, он сам может определить - является ли документ каноническим или нет. Просто я читал, что за дублированный контент на сайте сайт могут пессемизировать. Правда ли это?
0

Ответы на пост (5)
Этот раздел заморожен и является архивом. Новые ответы добавлять нельзя.
Kottt74 Kottt74
1
04.05.2013 00:45
да правда))) а robots.txt не нужен вобще
0
grot grot
30
04.05.2013 00:50
фиг та он чё определяет.....он даже проиндексировать нормально не может...насчёт каноникл ты не прав я это испытал на своём сайте
0
grot grot
30
04.05.2013 00:51
а песимизировать могут 100 процентов тоже испытал это сам...
0
gdemozg gdemozg
2
04.05.2013 03:27
Роботс обязателен!
А Яндекс не всегда верно определяет, что канонический документ, а что дубль.
0
Ivan_Golovinov Ivan_Golovinov
157
04.05.2013 08:07
Убирает и фильтрует весь сайт!
0

Похожие посты

Анализ сайта

Поможем улучшить ваш сайт.