SEO Сообщество: Спрашивайте и помогайте

Присоединяйтесь к сообществу профессиональных веб-мастеров PR-CY, отвечайте на вопросы коллег и задавайте свои.

Зарегистрироваться Войти
Q&A SEO
  1. Сообщество
  2. Вопросы и ответы
  3. Стоит ли переживать за такое предупреждение в search console?

Стоит ли переживать за такое предупреждение в search console?

meyliss meyliss  
3
  09.12.2019 22:05       1 316    


пишет, что проиндексировано несмотря на запрет в robots. на самом деле в роботсе есть правило:

Disallow: */feed*

но гугл как обычно игнорит роботс, в итоге такая картина как в скрине

303581d19d6a0e420449ed84c2f78c5e.png

вопрос: стоит ли волноваться? смотрел другие более успешные сайты, где ни метатега X-Robots-Tag в страницах с /feed, ни самого запрета в роботс. так вопрос еще один: как поступить то?

0

Ответы на пост (21) Написать ответ
Быстрая регистрация для ответа Войти
Roman2002 Roman2002
220
10.12.2019 00:40
Пусть индексирует, вам жалко что ли)
Либо отключите feeds вообще.
0
meyliss meyliss
3
10.12.2019 01:55
а как их отключить?!

жалко не жалко какая разница, это бесполезный контент для людей. и я не хочу чтобы этот мусор лежал в поиске
0
garik1331 garik1331
1434
10.12.2019 02:40
Переживать вообще никогда не из за чего не стоит  )  
0
meyliss meyliss
3
10.12.2019 02:42
таким умным родился или становился?
0
mozgsupport mozgsupport
193
10.12.2019 13:07
Он в своем репертуаре, это же Гарик, он и в Африке ...:)
0
Иван Михайлович Иван Михайлович
39
10.12.2019 06:21
Disallow: /feed/
0
meyliss meyliss
3
10.12.2019 06:22
да там без разницы, и то и другое пробовал
0
meyliss meyliss
3
10.12.2019 06:22
закрыть надо другим путем
0
Иван Михайлович Иван Михайлович
39
10.12.2019 06:54
Плагин на Wordpress - Webcraftic Clearfy. В разделе Производительность есть функция отключить все что связано с RSS каналами
0
meyliss meyliss
3
10.12.2019 06:58
да причем тут отключение? я не собираюсь избавиться от ленты, а просто убрать их с индекса.
0
Иван Михайлович Иван Михайлович
39
10.12.2019 06:56
https://ru.wordpress.org/plugi...
0
Иван Михайлович Иван Михайлович
39
10.12.2019 07:20
"да причем тут отключение? я не собираюсь избавиться от ленты, а просто убрать их с индекса."

ДАК УБЕРИ СТАТЬИ ИЗ ИНДЕКСА!!!
0
meyliss meyliss
3
10.12.2019 20:13
зачем?
0
Ouroboros Ouroboros
1460
10.12.2019 09:01
Закрыть страницы от индексации мета-тегом meta name="robots" content="noindex". Рекомендуют параллельно убрать запрет на сканирование в файле роботс таких страниц. З.Ы. До жути кривой редактор (при редактировании сообщений) пр-су не дает возможности нормально отобразить код.
0
Ouroboros Ouroboros
1460
10.12.2019 09:07
<meta name="robots" content="noindex" />
0
meyliss meyliss
3
10.12.2019 10:50
а с сайтмэп-ом что-то нужно сделать? ведь и там возможно уже прописаны эти страницы с /feed. а это уже ссылка
0
Ouroboros Ouroboros
1460
10.12.2019 11:00
Да, из сайтмапа, думаю, лучше убрать эти страницы, хотя проблем это не должно создавать.
0
meyliss meyliss
3
10.12.2019 14:10
проблем скорее всего могут создавать в search console при отправке на перепроверку.

в целом врубился, теоретически все понял. но вот на практике непонятно как 

<meta name="robots" content="noindex" />

для страниц с фрагментами /feed

может пробовать закрыть в файле .htaccess при помощи заголовка X-Robots-Tag тоже с noindex?
0
meyliss meyliss
3
10.12.2019 20:14
а как можно вообще определенные страницы удалить с sitemap? это технически реализуема?

в решении проблемы использую сейчас директиву в .htaccess, в форуме гугла именно ее рекомендуют, если не получается прописать для страниц с feed метатеги.
0
Seorutector Seorutector
1
10.12.2019 13:30
Попробуйте удалить страницы из индекса Google при помощи раздела "Удалить URL адреса" в Search Console

https://www.google.com/webmast...
59c604c340054d747bd2046de5a675bb.png
1
meyliss meyliss
3
10.12.2019 14:11
если удалить, при публикации новых материалов на сайте - заново же появятся эти страницы с feed
0
Быстрая регистрация для ответа Войти

Похожие посты

Анализ сайта

Поможем улучшить ваш сайт.