Нужен ли обязательно robots.txt?

Logan9991 Logan9991   04.05.2013 00:34   342  
Я заметил, что Яндекс самостоятельно убирает дубли страниц. То-есть, он сам может определить - является ли документ каноническим или нет. Просто я читал, что за дублированный контент на сайте сайт могут пессемизировать. Правда ли это?

Ответы на вопрос (5) Написать ответ
Kottt74 Kottt74   04.05.2013 00:45
да правда))) а robots.txt не нужен вобще
0
grot grot   04.05.2013 00:50
фиг та он чё определяет.....он даже проиндексировать нормально не может...насчёт каноникл ты не прав я это испытал на своём сайте
0
grot grot   04.05.2013 00:51
а песимизировать могут 100 процентов тоже испытал это сам...
0
gdemozg gdemozg   04.05.2013 03:27
Роботс обязателен!
А Яндекс не всегда верно определяет, что канонический документ, а что дубль.
0
Ivan_Golovinov Ivan_Golovinov   04.05.2013 08:07
Убирает и фильтрует весь сайт!
0

Войдите, чтобы написать ответ
Вход Регистрация

Теперь каждый посетитель вашего сайта сможет вам позвонить! Увеличение продаж на 75% от pozvonim.com - проверено!