SEO Сообщество: Спрашивайте и помогайте

Присоединяйтесь к сообществу профессиональных веб-мастеров PR-CY, отвечайте на вопросы коллег и задавайте свои.

Q&A SEO

Как бороться с ботами на сайте

Сергей Поминов Сергей Поминов  
2
  06.11.2021 07:38       1 633     Помощь  

Всем привет, большое нашествие ботов на сайте, 500в сутки это переходы из поисковиков 1500 это прямые заходы то есть боты, как с этим бороться? сайт игровой, движок DLE.


Ответы на пост (2) Написать ответ
Ouroboros Ouroboros
1370
06.11.2021 10:14
Варианта два:
1. Забить, если боты не создают проблем в функционировании сайта (если не создают ощутимой нагрузки на сервер).
2. Блокировать "плохих" ботов, закрывая им доступ в .хтассесс или в настройках на хостинге/сервере (если доступны такие функции). Здесь стоит быть аккуратным и не заблочить нужных роботов (гугл, яндекс, прочие).
1
braincoder braincoder
0
16.11.2021 16:34
RewriteEngine on
RewriteCond %{HTTP_USER_AGENT} ".*ia_archiver.*" [OR]
RewriteCond %{HTTP_USER_AGENT} ".*MJ12bot.*" [OR]
RewriteCond %{HTTP_USER_AGENT} ".*AhrefsBot.*" [OR]
RewriteCond %{HTTP_USER_AGENT} ".*rogerBot.*" [OR]
RewriteCond %{HTTP_USER_AGENT} ".*MegaIndex\.ru/2\.0.*" [OR]
RewriteCond %{HTTP_USER_AGENT} ".*bingbot.*" [OR]
RewriteCond %{HTTP_USER_AGENT} ".*Baiduspider.*" [OR]
RewriteCond %{HTTP_USER_AGENT} ".*archive\.org_bot.*" [OR]
RewriteCond %{HTTP_USER_AGENT} ".*BLEXBot.*" [OR]
RewriteCond %{HTTP_USER_AGENT} ".*LinkpadBot.*" [OR]
RewriteCond %{HTTP_USER_AGENT} ".*spbot.*" [OR]
RewriteCond %{HTTP_USER_AGENT} ".*Serpstatbot.*"
RewriteRule ".*" "-" [F]
0