SEO Сообщество: Спрашивайте и помогайте

Присоединяйтесь к сообществу профессиональных веб-мастеров PR-CY, отвечайте на вопросы коллег и задавайте свои.

Q&A SEO

Как заставить гуглЕ индексировать только то, что нужно? ))

PizzaHut PizzaHut  
205
  03.11.2011 10:30       1 192    
Яндекс отлично индексирует статьи, и все то, что не закрыто в файле роботс.тхт ... гугл же индексирует все, что есть на сайте..
Для гуглЕбота прописаны все директивы, такие же, как и для бота Яндекса. Однако картина другая...как попросить гугель индексировать только то, нужно)?? спасибо.

Ответы на пост (11) Написать ответ
asustek asustek
70
03.11.2011 22:21
Вот что пишет полу-бомж(http://polu-bomj.ru):
Google, как правило, индексирует все, что только можно: служебные страницы, теги и т.д. И далеко не всегда обращает внимание на запрет в robots.txt. Такой вот непослушный

Много чего интересного у него, пойду дальше читать =)
1
Решение
PizzaHut PizzaHut
205
03.11.2011 23:49
одним словом, гугл - говно)))
0
miskastar miskastar
148
03.11.2011 10:38
Правильно составлять robots.txt
Он работает и для гуглабота.
-1
PizzaHut PizzaHut
205
03.11.2011 11:43
Мой Роботс составлен правильно. Иначе он бы не работал в яндексе. Более того, роботс составлен даже более грамотно, чем Вы можете себе это представить.
0
operok operok
6
03.11.2011 13:37
для начала покажите Ваш robots.txt
-1
PizzaHut PizzaHut
205
03.11.2011 13:47
он точно такой же, как и для яндекса, только вместо яндекса написано - Googlebot , и нет директивы host ...
может что-то не так сделал?
в Яндексе то все ок...
0
PRaiDs PRaiDs
66
03.11.2011 13:40
Таже проблема.
У Google много мощности и он индексируется все! Даже то, что закрыто в robots.txt

Думаю просто нужно подождать.. со временем все образуется.
-1
PRaiDs PRaiDs
66
03.11.2011 13:41
Думаю может для google отдельно задать robots.txt?
0
PizzaHut PizzaHut
205
03.11.2011 13:43
у меня для него отдельно и задано)) уже больше года))) мало того, те страницы, которые были удалены более 3 месяцев назад, до сих пор в индексе... гугл, такой гугл))!
0
PizzaHut PizzaHut
205
03.11.2011 13:44
Думаю, может это из-за дмоз каталога.... как сайт в него запихнули, так и началось ... жрет все подряд...это не нравится мне.. ((
0
marsrip marsrip
1
24.03.2013 01:52
Если странички которые не надо попали в индекс то их спокойно можно удалить с кеша Гоши юзайте панель вэбмастера гугл там есть такая опция ... + надо конечно отключить в robots.txt
0