SEO Сообщество: Спрашивайте и помогайте

Присоединяйтесь к сообществу профессиональных веб-мастеров PR-CY, отвечайте на вопросы коллег и задавайте свои.

Q&A SEO

Заходы ботов, как защититься?

Fly In Fly In  
4
  05.06.2018 08:28       1 007    
Сегодня ночью заметил странные заходы, прямые заходы,150 заходов на сайт за пару минут, длительность заходов 1-4 секунды, все на разные страницы сайта. Вопрос, как защитить сайт от подобных накруток? Делают ли это конкуренты? И не повлияет ли это на выдачу яндекса, т.к. отказы и время на сайте щас максимально высокое.

Ответы на пост (8) Написать ответ
Fly In Fly In
4
05.06.2018 08:50
Написал в поддержку, и реально. в статистике Мониторинг, это заходили роботы Яндекса, такого раньше не было...
0
Curant Curant
171
05.06.2018 10:50
да ничего не будет. Если не нравится, посмотри логи и сделай запрет. Этих роботов очень много и они занимаются такими вещами. У амазона и т.п. тоже роботы залетают, в общем у многих.
0
Fly In Fly In
4
05.06.2018 11:01
Просто никогда такого не было, как стадо котят залетело, и по всему сайту побегало
0
Curant Curant
171
05.06.2018 11:12
Ну так на просторах интернета миллиарды сайтов и как только обнаружат, так сразу бегут боты всех кому не лень. У меня в свое время амазон периодически заскакивал, тоже всплеск +150+200. Посмотрел по логам и поставил запрет. Заходить перестали. От левых пока боты не приходили.
0
Curant Curant
171
05.06.2018 11:14
# Блокируем плохие домены
RewriteEngine on
RewriteCond %{HTTP_REFERER} ^http(s)?://(www\.)?anonym.to/.*$ [NC,OR]
RewriteCond %{HTTP_REFERER} ^http(s)?://(www\.)?anonym.to.*$ [NC,OR]
RewriteCond %{HTTP_REFERER} ^http(s)?://(www\.)?anonyme.ru/.*$ [NC,OR]
RewriteCond %{HTTP_REFERER} ^http(s)?://(www\.)?anonyme.ru.*$ [NC,OR]
RewriteCond %{HTTP_REFERER} ^http(s)?://(www\.)?priceg.com.*$ [NC,OR]
RewriteCond %{HTTP_REFERER} ^http(s)?://(www\.)?ilovevitaly.com.*$ [NC,OR]
RewriteCond %{HTTP_REFERER} ^http(s)?://(www\.)?ilovevitaly.com/.*$ [NC,OR]
RewriteCond %{HTTP_REFERER} ^http(s)?://(www\.)?cenoval.ru/.*$ [NC,OR]
RewriteCond %{HTTP_REFERER} ^http(s)?://(www\.)?cenoval.ru.*$ [NC,OR]
RewriteCond %{HTTP_REFERER} ^http(s)?://(www\.)?darodar.com.*$ [NC,OR]
RewriteCond %{HTTP_REFERER} ^http(s)?://(www\.)?darodar.com/.*$ [NC,OR]
RewriteCond %{HTTP_REFERER} ^http(s)?://(www\.)?urls.topdownloads.ru/.*$ [NC,OR]
RewriteCond %{HTTP_REFERER} ^http(s)?://(www\.)?urls.topdownloads.ru.*$ [NC,OR]
RewriteCond %{HTTP_REFERER} ^http(s)?://(www\.)?topdownloads.ru/.*$ [NC,OR]
RewriteCond %{HTTP_REFERER} ^http(s)?://(www\.)?topdownloads.ru.*$ [NC,OR]
RewriteCond %{HTTP_REFERER} ^http(s)?://(www\.)?ftns.ru.*$ [NC,OR]
RewriteCond %{HTTP_REFERER} ^http(s)?://(www\.)?ftns.ru/.*$ [NC,OR]
RewriteCond %{HTTP_REFERER} ^http(s)?://(www\.)?forum.advokateg.ru/topic/888/.*$ [NC,OR]
RewriteCond %{HTTP_REFERER} ^http(s)?://(www\.)?vodkoved.ru.*$ [NC,OR]
RewriteCond %{HTTP_REFERER} ^http(s)?://(www\.)?site.name.tr/.*$ [NC]

Options All -Indexes
RewriteEngine on
0
Curant Curant
171
05.06.2018 11:17
На просторах интернета найди список плохих ботов, ip, доменов и т.п. и пропиши в .htaccess. Беспокоить не будут.
0
grintroll grintroll
52
05.06.2018 15:33
Можно добавить правило в фаервол, если N запросов за еденицу времени то блочить ИП источника. Шаблоны правил легко нагуглить. Но если вас не ддосят врядли стоит заморачиваться, просто исключить их из аналитики.
0
sungoldline sungoldline
1308
06.06.2018 03:31
Кому нужен список bad ботов, пишите в личку, не хочу простыню тут выкладывать ))
0