SEO Сообщество: Спрашивайте и помогайте

Присоединяйтесь к сообществу профессиональных веб-мастеров PR-CY, отвечайте на вопросы коллег и задавайте свои.

Q&A SEO

Некоторые страницы не попали в индекс Яндекса?

kosfed kosfed  
22
  22.01.2012 12:49       2 358    
На сегодняшний день существует ситуация, которую я не могу объяснить.

Есть проект Postun.com. Мы пишем статьи с постовыми. Статьи качественные и уникальные (96-100%). Некоторые статьи не лезут в индекс. Хотя у сайта, которые публикует наши статьи с указанием источника, все статьи заходят в индекс Яндекса.

С чем это может связано? Что сделать, чтобы они попали в индекс. Добавлял статьи в Яндекс, но пока безуспешно...

Помогите с анализом ситуации и ее решением.

Все статьи попадают в Твиттер

Ответы на пост (4) Написать ответ
GreenMan GreenMan
20
22.01.2012 14:54
У вас 67 новых регистраций в сутки. Это же спамные регистрации, возможно они вам и портять репутацию в глазах поисковиков.

Посмотрел еще ваш robots.txt - составлен неправильно:
User-agent: *
Disallow: /*print
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /user/
Disallow: /favorites/
Disallow: /index.php?do=register
Disallow: /?do=lastcomments
Disallow: /statistics.html
Sitemap: http://postun.com/sitemap.xml
User-agent: Yandex
Host: postun.com

Почему? Директива для Яндекса стоит после общей, поэтому запреты на индексацию, которые стоят выше не действуют для него, а значит все те ненужные и дубли страниц стараються попасть в индекс.

Я рекоммендую заменить ваш robots.txt на следующий:
User-agent: *
Disallow: /*print
Disallow: /autobackup.php
Disallow: /admin.php
Disallow: /user/
Disallow: /favorites/
Disallow: /index.php?do=register
Disallow: /?do=lastcomments
Disallow: /statistics.html
Sitemap: http://postun.com/sitemap.xml
Host: postun.com

Если вдруг захотите сказать "спасибо", вот мой профиль на маулнете.
0
kosfed kosfed
22
22.01.2012 15:26
как мне сократить спамные регистрации?
0
GreenMan GreenMan
20
22.01.2012 18:59
Можно поставить более сложную капчу, или поставить 2 штуки.
А вообще можно и не скоращать их, а просто изменить роботс.тхт как я говорил и на регистрации можно будет не обращать внимание.
0
GreenMan GreenMan
20
22.01.2012 19:01
Смотрю, что вы уже его изменили, тогда не волнуйтесь за регистрации, просто неактивные периодически удалять.
0