Здравствуйте!
Помогите с robots.txt в Вордпресс. Закрываю страницы от индексации, а вот Гугл индексирует все подряд, только появляется надпись "Описание веб-страницы недоступно из-за ограничений в файле robots.txt"
Сам роботс:
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /wp-cron.php
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /webstat/
Disallow: /feed/
Disallow: /tag/
Disallow: /search/
Disallow: /goto/
Disallow: /author/
Disallow: /2013/
Disallow: /2014/
Disallow: /2015/
Disallow: *.html/*
Disallow: */sphinx/*
Disallow: */*.js*
Disallow: /daos/
Disallow: */?p*
Disallow: */?s*
Host: xxxxx.xx
Sitemap: http://xxxxx.xx/sitemap.xml
Я что-то не так прописываю?