SEO Сообщество: Спрашивайте и помогайте

Присоединяйтесь к сообществу профессиональных веб-мастеров PR-CY, отвечайте на вопросы коллег и задавайте свои.

Q&A SEO

Robots.txt wordpress

Пользователь #79379 Пользователь #79379  
78
  11.04.2013 18:25       1 633    
Здравствуйте!
Помогите с robots.txt в Вордпресс. Закрываю страницы от индексации, а вот Гугл индексирует все подряд, только появляется надпись "Описание веб-страницы недоступно из-за ограничений в файле robots.txt"


1365690245-clip-5kb.png


Сам роботс:
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /wp-cron.php
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /webstat/
Disallow: /feed/
Disallow: /tag/
Disallow: /search/
Disallow: /goto/
Disallow: /author/
Disallow: /2013/
Disallow: /2014/
Disallow: /2015/
Disallow: *.html/*
Disallow: */sphinx/*
Disallow: */*.js*
Disallow: /daos/
Disallow: */?p*
Disallow: */?s*

Host: xxxxx.xx

Sitemap: http://xxxxx.xx/sitemap.xml

Я что-то не так прописываю?

Ответы на пост (2) Написать ответ
delete567567 delete567567
1486
11.04.2013 18:32
Со временем исчезнет с выдачи.
0
Спасибо.
0