Как безопасно занести в черный список эти IP-адреса, найденные в AWStats?

У моего сайта есть проблемы с производительностью, частично вызванные ботами. Я проверил свои AWStats и обнаружил, что некоторые IP-адреса поглощают тонны полосы пропускания. Как я могу сказать, безопасно ли это занести в черный список? Некоторые постоянно съедают по 2 ГБ в месяц и более.

Смотрите этот скриншот: https://ibb.co/hJ6hmR

Я попытался найти IP-адрес на этих IP-адресах, но как я могу определить, следует ли мне что-то сохранить, например, известные сканеры?

Я также проверил сканеры в AWStats, но не вижу IP-адреса, поэтому не могу сказать, откуда он. Один неизвестный робот съел 11 ГБ, тогда как робот Google использует только 1 ГБ. https://ibb.co/cWDCmR

Как выделить плохих сканеров?

Источник

1 ответ

Решение

Вы можете попробовать запретить роботов в вашем.htaccess, если вы используете Apache

BrowserMatchNoCase thisisthebotname bad_bot
Order Deny,Allow
Deny from env=bad_bot

Но вам нужен пользовательский агент бота

Источник
Другие вопросы по тегам