SEO Сообщество: Спрашивайте и помогайте

Присоединяйтесь к сообществу профессиональных веб-мастеров PR-CY, отвечайте на вопросы коллег и задавайте свои.

Q&A SEO

Удаление дублей с www. Как исправить?

Отдел Закупок Отдел Закупок  
0
  15.11.2017 14:39       2 570    
Здравствуйте! Имеется молодой сайт, у которого 6 страниц, одна из них - главная. При проверке на дубли страниц в поиске яндекс было выявлено 3 дубля с www - один из которых идет на главную страницу. Поскольку ранее никакие настройки не выполнялись касаемо определения зеркала сайта, то я ввела в роботс следующий код (полностью):
User-agent: *Disallow:Host: мойдомен.ru
Sitemap: http://мойдомен.ru/sitemap.xml
И откорректировала файл .htaccess, теперь он имеет полностью такой код:deny from allRewriteEngine OnRewriteCond %{HTTP_HOST} ^www.мойдомен.ru$ [NC]RewriteRule ^(.*)$ http://мойдомен.ru/ [R=301,L]
В вебмастере яндекс добавила данный код роботс на проверку, но долго она продолжается. Тем временем дубли еще до сих пор имеются в поиске яндекс.

В вебмастере до сих пор висит сообщение:
Возможные проблемыВ файле robots.txt не задана директива Host Для корректного определения главного зеркала сайта рекомендуется задать соответствующую директиву Host в файлах robots.txt всех зеркал сайта. В случае ее отсутствия главное зеркало может быть выбрано автоматически.Добавьте директиву Host в файл robots.txt.

Скажите, что мне еще необходимо сделать, чтобы избавиться от дублей с www?
Получается ведь, что перенаправление 301 настроено, но судя по описанному выше, это касается только главной страницы или еще нужно перенаправление сделать и на остальные странички (или это уже касается всего сайта)? Или необходимо просто подождать, когда все само собой решится? Поскольку я не специалист, поэтому плохо разбираюсь в данной терминологии.

Ответы на пост (17) Написать ответ
alexakap alexakap
325
15.11.2017 14:52
Адрес сайта лучше дайте
1
Отдел Закупок Отдел Закупок
0
15.11.2017 15:22
В лс кинула
0
ZAYMY ZAYMY
52
15.11.2017 15:03
"User-agent: *Disallow:Host: мойдомен.ru
Sitemap: http://мойдомен.ru/sitemap.xml"

User-agent: *
Allow: /

Host: мойдомен.ru
Sitemap: http://мойдомен.ru/sitemap.xml

Непонятно, что вы там закрыли?
2
Отдел Закупок Отдел Закупок
0
15.11.2017 15:12
Получается. ничего. Тогда следует вставить Allow: / ? Извините за глупый вопрос
0
KaptoLLIka KaptoLLIka
71
15.11.2017 15:50
Проще прописать Disallow: / и нам мозг не ебать.
0
Nika_r Nika_r
187
15.11.2017 15:50
Уважаемая девушка, вы понимаете, что делаете и что зачем пишите, а также что именно что обозначает? Вам надо а) указать главное зеркало в роботс, и б) переадресацию в файле .htaccess c неглавного зеркала на главное. Что вы хотели сказать поисковикам фразой: "User-agent: *Disallow:Host: мойдомен.ru" я не поняла.
0
Nika_r Nika_r
187
15.11.2017 15:53
Host - это указание главного зеркала. Вы пишите, что запрещаете индексировать главное зеркало?
0
Отдел Закупок Отдел Закупок
0
15.11.2017 16:07
Тут неправильно скопировалось по абзацам, выглядит так на самом деле:
User-agent: *
Disallow:
Host: мойдомен.ru

Sitemap: http://мойдомен.ru/sitemap.xml
0
Nika_r Nika_r
187
15.11.2017 16:11
Хорошо, вы разместили в столбик... Слово Disallow к чему относится? Вы что сказать-то им хотите?
0
Отдел Закупок Отдел Закупок
0
15.11.2017 16:12
Насколько мне известно, Disallow равен Allow/, чтобы все индексировалось
0
Отдел Закупок Отдел Закупок
0
15.11.2017 16:16
а вот и мой файл .htaccess, который тоже как попало сюда скопировался:
deny from all
RewriteEngine On
RewriteCond %{HTTP_HOST} ^www.мойдомен.ru$ [NC]
RewriteRule ^(.*)$ http://мойдомен.ru/$1 [R=301,L]
0
Nika_r Nika_r
187
15.11.2017 16:12
Смотрите.
User-agent: *
Host: мойдомен.ru
0
Nika_r Nika_r
187
15.11.2017 16:15
Это вы указываете свой главный домен. Далее пишите Disallow: / что вы хотите, чтобы не индексировалось. Но так как, судя по вашим вопросам - вы вообще ничего не понимаете, что закрывать, что не закрывать и как. Почитайте вначале общие статьи в интернете.
0
Nika_r Nika_r
187
15.11.2017 16:18
Disallow - это указание не индексировать, Allow - индексировать. Вот это хотя бы прочтите: https://yandex.ru/support/webmaster/controlling-robot/robots-txt.html#allow-disallow
0
Nika_r Nika_r
187
15.11.2017 16:19
Девушка, милая, вы либо попытайтесь понять хотя бы азы. Или наймите мастера. Всего доброго.
0
Nika_r Nika_r
187
15.11.2017 16:26
Я поняла, откуда вы взяли ваш кусок. Из этой же статьи. Но это пример там.... А не полный файл роботс.
0
sansan sansan
1680
15.11.2017 20:03
Если переадресация в .htaccess настроена правильно, то...
скоро всё наладится :)
Если в роботсе прописан нормально host, а в sitemap - адекватные адреса.

ps: а что пишет вам Яндекс... вы лучше и не цитируйте :) Яша - в коме, но его здоровье - неинтересно.
0