SEO Сообщество: Спрашивайте и помогайте

Присоединяйтесь к сообществу профессиональных веб-мастеров PR-CY, отвечайте на вопросы коллег и задавайте свои.

Q&A SEO

Robots.txt

sagat333 sagat333  
14
  17.08.2011 17:54       1 389    
User-agent: *
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed

User-agent: Yandex
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: */trackback
Disallow: */*/trackback
Disallow: */*/feed/*/
Disallow: */feed

Host: bigalax.wt9.ru
Sitemap: http://bigalax.wt9.ru/sitemap.xml

вот мой robots.txt но в гугле при анализе многие сообщения запрещены к индексации. какую строчку убрать чтобы все сообщения индексировались???

Ответы на пост (5) Написать ответ
74ivan74 74ivan74
472
17.08.2011 19:49
Это
Disallow: */*/trackback
Disallow: */*/feed/*/
точно не то
достаточно
Disallow: */trackback
Disallow: */feed
2
Решение
mav123 mav123
1073
17.08.2011 18:56
"Многие" - это какие? Такие вопросы нужно задавать с примерами и подробностями. Пример, ссылку в студию.
Существует ещё анализатор у яндекса. Первым делом нужно пользоваться им, проверять самостоятельно.
Не помню всех тонкостей синтаксиса, но меня смущают вот эти места: */*/
0
ruslan13a ruslan13a
1
17.08.2011 20:24
Вот почитай http://rusellned.ru/uroki-%e2%80%9cwp-css%e2%80%a6%e2%80%9d/fajl-robots-txt-dlya-bloga.html
1
milanox milanox
5
17.08.2011 22:18
а дублировать дважды одно и то же зачем? иль вы думаете, что бот яши не поймет что от него хотят, пока не ткнешь пальцем? ))))
1
markus91 markus91
185
18.08.2011 00:12
Почитайте http://alluweb.ru/article/robots.txt
И не надо дублировать)))
0