SEO Сообщество: Спрашивайте и помогайте
Присоединяйтесь к сообществу профессиональных веб-мастеров PR-CY, отвечайте на вопросы коллег и задавайте свои.
Присоединяйтесь к сообществу профессиональных веб-мастеров PR-CY, отвечайте на вопросы коллег и задавайте свои.
Сергей Поминов
06.11.2021 07:38
2 419
Всем привет, большое нашествие ботов на сайте, 500в сутки это переходы из поисковиков 1500 это прямые заходы то есть боты, как с этим бороться? сайт игровой, движок DLE.
Поможем улучшить ваш сайт.
1. Забить, если боты не создают проблем в функционировании сайта (если не создают ощутимой нагрузки на сервер).
2. Блокировать "плохих" ботов, закрывая им доступ в .хтассесс или в настройках на хостинге/сервере (если доступны такие функции). Здесь стоит быть аккуратным и не заблочить нужных роботов (гугл, яндекс, прочие).
RewriteEngine on RewriteCond %{HTTP_USER_AGENT} ".*ia_archiver.*" [OR] RewriteCond %{HTTP_USER_AGENT} ".*MJ12bot.*" [OR] RewriteCond %{HTTP_USER_AGENT} ".*AhrefsBot.*" [OR] RewriteCond %{HTTP_USER_AGENT} ".*rogerBot.*" [OR] RewriteCond %{HTTP_USER_AGENT} ".*MegaIndex\.ru/2\.0.*" [OR] RewriteCond %{HTTP_USER_AGENT} ".*bingbot.*" [OR] RewriteCond %{HTTP_USER_AGENT} ".*Baiduspider.*" [OR] RewriteCond %{HTTP_USER_AGENT} ".*archive\.org_bot.*" [OR] RewriteCond %{HTTP_USER_AGENT} ".*BLEXBot.*" [OR] RewriteCond %{HTTP_USER_AGENT} ".*LinkpadBot.*" [OR] RewriteCond %{HTTP_USER_AGENT} ".*spbot.*" [OR] RewriteCond %{HTTP_USER_AGENT} ".*Serpstatbot.*" RewriteRule ".*" "-" [F]