Назад | Перейти на главную страницу

lighttpd: бэкэнд перегружен

У меня есть сайт с высоким трафиком, который я пытаюсь поддерживать, но время от времени при скачках я застреваю на:

 (mod_fastcgi.c.2900) backend is overloaded; we'll disable it for 2 seconds and send the request to another backend instead: reconnects: 0 load: 2541

Текущая статистика:

absolute (since start)
Requests    15 kreq
Traffic 20.02 Mbyte
average (since start)
Requests    81 req/s
Traffic 106.24 kbyte/s
average (5s sliding average)
Requests    94 req/s
Traffic 99.23 kbyte/s

3952 connections

Сам сайт представляет собой очень простой PHP-сайт без использования MySQL. У меня установлен и настроен APC.

Я добавил предлагаемые изменения в /etc/sysctl.conf:

# These ensure that TIME_WAIT ports either get reused or closed fast.
net.ipv4.tcp_fin_timeout = 1
net.ipv4.tcp_tw_recycle = 1

# TCP memory
net.core.rmem_max = 16777216
net.core.rmem_default = 16777216
net.core.netdev_max_backlog = 262144
net.core.somaxconn = 262144

net.ipv4.tcp_syncookies = 1
net.ipv4.tcp_synack_retries = 2
net.ipv4.tcp_syn_retries = 2
net.ipv4.tcp_max_syn_backlog = 2048
net.ipv4.tcp_max_syn_backlog = 262144
net.ipv4.tcp_max_orphans = 262144

Мой lighttpd.conf выглядит так:

server.max-fds = 12000
server.max-keep-alive-requests = 0
server.event-handler = "linux-sysepoll"
server.max-connections = 10000

Конфигурация fastcgi:

## Start an FastCGI server for php (needs the php5-cgi package)
fastcgi.server    = ( ".php" =>
    ((
            "bin-path" => "/usr/bin/php-cgi",
            "socket" => "/tmp/php.socket",
            "max-procs" => 14,
            "bin-environment" => (
                    "PHP_FCGI_CHILDREN" => "30",
                    "PHP_FCGI_MAX_REQUESTS" => "100000"
            ),
            "bin-copy-environment" => (
                    "PATH", "SHELL", "USER"
            ),
            "broken-scriptfilename" => "enable"
    ))
)

загрузка сервера:

top - 08:04:26 up 97 days, 15:14,  1 user,  load average: 0.10, 0.08, 0.04
Tasks: 570 total,   3 running, 567 sleeping,   0 stopped,   0 zombie
Cpu(s):  0.9%us,  0.2%sy,  0.0%ni, 98.5%id,  0.3%wa,  0.0%hi,  0.0%si,  0.0%st
Mem:   4056176k total,  3716120k used,   340056k free,   631600k buffers
Swap:   995988k total,    15544k used,   980444k free,  1631236k cached

Я пробовал разные вещи. Я знаю, что наличие высоких протоколов Mac, как правило, нехорошо, однако, если я поставлю его ниже, сервер сразу же начнет выдавать 500 ошибок.

Есть ли у кого-нибудь предложения о том, что еще можно попробовать настроить, чтобы сайт оставался стабильным? Можно ли вообще поддерживать такой уровень трафика на одном сервере?

Я бы предложил поставить перед lighttpd какое-то решение для кеширования, которое могло бы обслуживать запросы из кеша и не попадать каждый раз в серверную часть, поскольку я могу, вы не полностью используете память.

Вы можете попробовать Varnish.

Varnish - это ускоритель веб-приложений. Вы устанавливаете его перед своим веб-приложением, и оно значительно ускоряет его.

Вот ссылка на то же самое - Лаковый кеш

"бэкэнд перегружен" - это означает, что один из 14 max-procs бэкенды перегружены (lighttpd создает разные сокеты для каждого max-procs backend, добавив "- [число]" к именам файлов сокетов).

Я бы выбрал меньшее количество max-procs, а вместо этого увеличил бы PHP_FCGI_CHILDREN, например "max-procs" => 2 и "PHP_FCGI_CHILDREN" => "210", или 4 и 100 (или 1 и 400).

Это должно снизить вероятность того, что один из бэкэндов заполнен, а другой все еще может принимать запросы. Однако я не уверен, насколько хорошо APC масштабируется с количеством PHP_FCGI_CHILDREN.

Другой способ - использовать spawn-fcgi в сочетании с несколько часов (multiwatch выполняет часть max-procs) - в этом решении все бэкенды php находятся в одном сокете, поэтому у вас нет проблем с балансировкой.