Русский ИТ бизнес
Русский ИТ бизнес

Защита от ботов будет в перспективе все более востребованным сервисом

Защита от ботов будет в перспективе все более востребованным сервисом
Защита от ботов будет в перспективе все более востребованным сервисом. Вот, опять, наш проект poisk.im долбят плохие парни :) со всех стран мира (прокси). Зачем? А я не знаю, просто парсят контент, хотя у нас частично под авторизацией.

Цитирую нашего спеца:

"Привет всем. Вчера вечером сработал алерт - сервер был под нагрузкой. Была полная жесть по парсингу и BunkerWeb (штука, которую я поставил для фильтрации) перестал справляться с наплывом ботов. Со всего мира долбились, 600к запросов за полдня и памяти для списка забаненых IP не хватило.

Я это к чему говорю. Переделал правила фильтрации, чтобы на более низком уровне отбивать запросы с "/" в accept, но по возможности уделите 5 минут и покликайте по сайту, пожалуйста, а то вдруг я слишком жесткую фильтрацию сделал, могут баниться обычные посещения."

tg / max

Комментарии (3)

  • Оранжевый Сухарь
    Оранжевый Сухарь
    ротацию логов слышали? и максимальный объем логов? Ответить
  • Взлетающий Продюсер
    Взлетающий Продюсер
    А надо ли защищаться от ботов в эпоху агентов?

    Лучше сразу публикуйте mcp, чтоб они не лазили по сайту, а ходили сразу на бэк Ответить
  • Невидимый Гриб
    Невидимый Гриб
    Ну так теперь есть соцсеть для нейронок, человек там только читать может. Есть сервер с Варкрафт, где 180 нейронок играют вместо людей. Нужно 2 интернета. Для людей и для роботов😂 Ответить