[Sysadmins] apache DoS by slowloris

[Sysadmins] apache DoS by slowloris

[Michael Shigorin]

	Здравствуйте.
Думал было упаковать slowloris и mod_qos, но похоже, сегодня не
успею, а потом забуду -- решил по крайней мере письмом описать.

Как известно, apache с моделью "один клиент -- один процесс"
(или одна нить, не суть важно) уязвим к слишком большому
количеству соединений, когда выедается память.  Поэтому обычно
лимиты на количество соединений устанавливаются "в разумных
пределах".  Правда, при этом возможно организовать отказ в
обслуживании методом создания и поддержания соответствующего
количества соединений.

По адресу http://ha.ckers.org/slowloris/ не так давно был
опубликован скрипт, использующий довольно давно известные
моменты, но переводящий их в практическое русло и весьма
эффективно DoS'ящий apache 1.x/2.x (в отличие от IIS 6/7,
lighttpd и nginx).  В логах не отсвечивает, заметен только
по стопке ESTABLISHED в `netstat -pan | grep httpd`.

Насколько понимаю, из используемого мной:
* mod_security неэффективен, поскольку до него дело не доходит;
* mod_limitipconn умеренно эффективен, поскольку не занимается
  сокетами (?);
* nginx может быть неэффективен, если до backend apache
  "долетает" достаточное количество таких тормозных соединений.

До mod_qos руки не дошли, пока кажется достаточным добавление в
секцию http{} уже используемого в качестве реверс-прокси nginx:

     client_header_timeout 11;
     client_body_timeout 11;
     keepalive_timeout 11;
     send_timeout 11;
#    limit_zone   slowdown  $binary_remote_addr  1m;
#    limit_conn   slowdown  7;

при лимитах в httpd.conf (вероятно, ещё будут корректироваться):

Timeout 35
KeepAlive On
KeepAliveTimeout 65

MinSpareServers 1
MaxSpareServers 2
StartServers 4
#MaxClients 8
MaxClients 16

MaxRequestsPerChild 100
ListenBacklog 511

и подобной настройке mod_limitipconn:

<IfModule mod_limitipconn.c>
        <Location />
                MaxConnPerIP 2
        </Location>
        # ...
</IfModule>

Речь про apache-1.3.

См. тж.:
* http://ha.ckers.org/blog/20090620/http-longevity-during-dos/
* http://www.codexon.com/posts/defending-against-the-new-dos-tool-slowloris

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/

Re: [Sysadmins] apache DoS by slowloris

[Денис Смирнов]

[-- Attachment #1: Type: text/plain, Size: 796 bytes --]

On Mon, Jul 06, 2009 at 09:13:17PM +0300, Michael Shigorin wrote:
 
MS> Думал было упаковать slowloris и mod_qos, но похоже, сегодня не
MS> успею, а потом забуду -- решил по крайней мере письмом описать.

Спасибо! Крайне интересная информация.

MS> * nginx может быть неэффективен, если до backend apache
MS>   "долетает" достаточное количество таких тормозных соединений.

Не совсем понимаю -- nginx отдает запрос апачу до того как получил целиком
тело запроса от клиента? Я не знал об этом, и это весьма неприятно. Мне
раньше казалось что установка nginx frontend фактически полностью
развязывает по таймингам любые извращения клиентов и backend'ы.

-- 
С уважением, Денис

http://freesource.info
----------------------------------------------------------------------------

[-- Attachment #2: Digital signature --]
[-- Type: application/pgp-signature, Size: 197 bytes --]

Re: [Sysadmins] apache DoS by slowloris

[Max Ivanov]

> Мне
> раньше казалось что установка nginx frontend фактически полностью
> развязывает по таймингам любые извращения клиентов и backend'ы.

99% что так и есть. nginx принимает весь POST запрос  и только потом
передает его бекенду, GET запросы поидее должны действовать так же. И
уж точно до апача не дойдет коннект, в котором не передана даже первая
строчка (т.е. не определен тип запроса).

Re: [Sysadmins] apache DoS by slowloris

[Денис Смирнов]

[-- Attachment #1: Type: text/plain, Size: 505 bytes --]

On Tue, Jul 07, 2009 at 08:09:39AM +0400, Max Ivanov wrote:

MI> 99% что так и есть. nginx принимает весь POST запрос  и только потом
MI> передает его бекенду, GET запросы поидее должны действовать так же. И
MI> уж точно до апача не дойдет коннект, в котором не передана даже первая
MI> строчка (т.е. не определен тип запроса).

99% этого мало, как бы проверить? :)

-- 
С уважением, Денис

http://freesource.info
----------------------------------------------------------------------------

[-- Attachment #2: Digital signature --]
[-- Type: application/pgp-signature, Size: 197 bytes --]

Re: [Sysadmins] apache DoS by slowloris

[Michael Shigorin]

On Tue, Jul 07, 2009 at 02:28:48AM +0400, Денис Смирнов wrote:
> MS> * nginx может быть неэффективен, если до backend apache
> MS>   "долетает" достаточное количество таких тормозных соединений.
> Не совсем понимаю -- nginx отдает запрос апачу до того как
> получил целиком тело запроса от клиента? Я не знал об этом, и
> это весьма неприятно.

А, это нет вроде.

> Мне раньше казалось что установка nginx frontend фактически
> полностью развязывает по таймингам любые извращения клиентов
> и backend'ы.

Писал почти день кусочками, отправлял уже в сонном виде,
#include <stdotmaz> :)

В данном конкретном случае (скармливание хедеров по чайной ложке)
вроде как действительно не должно долетать, но по результатам
экспериментов без лёгкого поднятия MaxClients на апаче у меня
сложилось ощущение, что что-то долетало.  Внимательно не смотрел,
поскольку опять же урывками.

-- 
 ---- WBR, Michael Shigorin <mike@altlinux.ru>
  ------ Linux.Kiev http://www.linux.kiev.ua/