Гугл бот ложет сайт

d1masd1mas d1masd1mas   11.05.2015 10:57   1 504  
Гугл бот ложет сайт. Вот лог сайта.



[11/May/2015:10:49:28 +0300] "POST /xmlrpc.php HTTP/1.0" 500 687 "-" "Mozilla/5.0 (compatible; Googlebot/2.1;   http://www.google.com/bot.html)"



За три минуты 2000 запросов к сайту. Сайт лежит. Что подскажите? Это действительно гугл бот или что-то другое?

Ответы на вопрос (7) Написать ответ
rozzukie rozzukie   11.05.2015 11:01
В вебмастере гугла ограничить скорость индексирования сайта.
0
alex614077 alex614077   11.05.2015 11:16
Попробуйте в robots.txt добавить вот такое
Crawl-delay: 10
0
d1masd1mas d1masd1mas   11.05.2015 11:27
Хорошо попробую, спасибо))
0
rozzukie rozzukie   11.05.2015 11:27
Crawl-delay: работает только в Яндексе, гугл данную директиву игнорирует
2
d1masd1mas d1masd1mas   11.05.2015 11:49
Ок, буду что то думать
0
alex614077 alex614077   11.05.2015 11:30
да, вы правы..... спасибо, что уточнили. Тогда только в Гугл.Вебмастере
0
rohanaro rohanaro   11.05.2015 11:52
прежде чем ограничивать гугл бота, посмотрите логи, проблема то на сайте, это может быть ошибка в скриптах, в php, в переадресации и т.д.
0

Войдите, чтобы написать ответ
Вход Регистрация