Этим утром на нашем сервере сработал краулер, который заходил на наш сайт почти 100 раз в секунду.
Мы хотели бы добавить для этого защиту.
Думаю, мне нужно использовать HttpLimitReqModule но я не хочу блокировать, разрешить google / bing / ... Как мне это сделать?
Также вы можете использовать ngx_http_limit_conn_module
Используйте скрипты Arno Iptables с включенным плагином IDS. Он сделает всю работу за вас. Ссылка на сайт