SEO Сообщество: Спрашивайте и помогайте

Присоединяйтесь к сообществу профессиональных веб-мастеров PR-CY, отвечайте на вопросы коллег и задавайте свои.

Q&A SEO

Гугл бот ложет сайт

d1masd1mas d1masd1mas  
94
  11.05.2015 10:57       2 164    
Гугл бот ложет сайт. Вот лог сайта.



[11/May/2015:10:49:28 +0300] "POST /xmlrpc.php HTTP/1.0" 500 687 "-" "Mozilla/5.0 (compatible; Googlebot/2.1;   http://www.google.com/bot.html)"



За три минуты 2000 запросов к сайту. Сайт лежит. Что подскажите? Это действительно гугл бот или что-то другое?

Ответы на пост (7) Написать ответ
rozzukie rozzukie
28
11.05.2015 11:01
В вебмастере гугла ограничить скорость индексирования сайта.
0
alex614077 alex614077
0
11.05.2015 11:16
Попробуйте в robots.txt добавить вот такое
Crawl-delay: 10
0
d1masd1mas d1masd1mas
94
11.05.2015 11:27
Хорошо попробую, спасибо))
0
rozzukie rozzukie
28
11.05.2015 11:27
Crawl-delay: работает только в Яндексе, гугл данную директиву игнорирует
2
d1masd1mas d1masd1mas
94
11.05.2015 11:49
Ок, буду что то думать
0
alex614077 alex614077
0
11.05.2015 11:30
да, вы правы..... спасибо, что уточнили. Тогда только в Гугл.Вебмастере
0
rohanaro rohanaro
99
11.05.2015 11:52
прежде чем ограничивать гугл бота, посмотрите логи, проблема то на сайте, это может быть ошибка в скриптах, в php, в переадресации и т.д.
0