Непонятки с индексацыей сайта yandex bot !

romario2008 romario2008   23.06.2017 19:38   781  
У Меня такая ситуация, на сайте с базой данных на 200 mb (4 000 страниц) сайту больше года и все страницы есть в индексе. Вопрос такой - Yandex bot  КАЖДЫЙ ДЕНЬ скачивает по 8-9 гигов !!! ...  Это нормальное явление ????


Вот скрин из awstats

870fcaf74d72.jpg

Ответы на вопрос (5) Написать ответ
zuma307 zuma307   23.06.2017 21:32
У меня был похожий случай, пошла большая нагрузка на сервер. В логах сайта определил IP, который долбал сайт, заблокировал его, но потом увидел, что там прописан Yandex bot. Написал в техподдержку хостинга. Они подтвердили, что именно этот IP грузит сервер, и что к Яндексу этот бот никакого отношения не имеет. Прислали распечатку данных этого IP, сервер его находился в Германии. Ну и рекомендовали заблокировать этот адрес. Так что найдите и проверьте по логам местонахождение этого бота, возможно это не Яндекс качает сайт.
0
romario2008 romario2008   23.06.2017 22:28
Проверял IP адреса - это яндекс бот !

А может это от того что я прописал микроразметку на сайте около месяца назад ??? Вот яндекс и пересканирует таким образом !
0
zuma307 zuma307   23.06.2017 22:34
Яндекс может на время удалить из поиска сайт, чтобы его полностью "перелопатить" и потом вернуть обратно в поиск на то же место. Но такие гигабайты вряд ли Яша будет грузить для индексации. Можно этот вопрос и Платону задать.
0
vipuslugi vipuslugi   23.06.2017 23:08
а что мешает в вебмастере посмотреть кол-во страниц загруженных за день?.
0
romario2008 romario2008   24.06.2017 12:48
это где именно смотреть ? в "Статистика обхода" ?
0

Войдите, чтобы написать ответ
Вход Регистрация

PRposting.com - продвижение статьями под БУРЖ и СНГ. PBN и Outreach сайты. 0 комиссии, 5% реферальских