1307 Знания

Google напомнил о частоте сканирования ботом

Веб-мастер может сам определять частоту посещений сайта Гуглботом.

В 2008 году поисковая система позволила через тогда еще Google Webmaster Tools (сейчас – Google Search Console) владельцам сайтов влиять на сканирование контента ботами.

По умолчанию поисковик сам определял частоту сканирования с учетом возможностей сервера размещения ресурса. Однако, если такая частота по каким-то причинам не устраивала сеошника, то он мог сам задать нужную:

Сегодня такая возможность все еще остается, несмотря на прекращение поддержки старой версии консоли, в которой этот инструмент был реализован. При этом Джон Мюллер напоминает о том, как долго ждать изменений, если вы вручную задаете необходимую частоту посещений Гуглботом:

«Обычно требуются сутки, чтобы изменения в частоте сканирования сайта нашим ботом вступили в силу. Если вам нужно повлиять на скорость, я бы также советовал использовать код ответа 503 для чрезмерных запросов с нашей стороны».

Подробное описание кодов ответа сервера – выложено здесь.

Google: мы можем индексировать контент даже без его сканирования
Дата в XML Sitemap и на странице контента – есть ли разница?
Как частота сканирования влияет на позиции в поиске
Комментарии (9)
Redfoxnat   30.09.2019 11:56
Очень важная информация, спасибо, что подсказываете!
Taras_Cherkassky   30.09.2019 12:57
Рады, что помогаем!
Kostya_Tokin   30.09.2019 17:19
А где посмотреть эту частоту сканирования?
Гуглбот очень часто сканирует, если вам нужно замедлить его работу, то зайдите в настройки сайта и в разделе скорость задайте нужный параметр
А с какой целью гуглбот часто сканирует сайт? чтобы инфа была всегда актуальная на сайте? просто у меня была такая штука, что я удалил поределенную статью, но она позже все равно высвечивалась в поисковике
Natalia88   05.10.2019 16:52
Ну у кого как, меня устраивает, все-таки в зависимости от частоты изменения контента происходит сканирование, вот поэтому у кого-то чаще, а у кого-то реже
maxklim   07.10.2019 15:42
Да, вот мой контент гугл сканирует раза два в месяц и позиция в принципе не меняется, так что все отлично
Kirill_Chekin   06.10.2019 15:46
Интересная штука, только вот недавно представители гугл заявили, что менять скорость сканирования крупным компаниям не стоит и оставить на усмотрение гуглом
Кто знает после запуска сайта, когда начинают сканировать боты?

Чтобы оставлять комментарии, вам нужно войти в систему

Авторизоваться