У меня проблема с парой серверов, у которых довольно много подключений.
Серверы просто зависают для новых сетевых подключений (хотя функция балансировки нагрузки в haproxy, похоже, работает правильно). Я не могу подключиться к ssh, и сервер не может подключиться к другим сокетам.
Я оставался подключенным к одной консоли на экране к серверу. Затем произошла ошибка. Я не смог выполнить ни одну команду через экран.
# ls
-bash: fork: Cannot allocate memory
Мне не удалось выполнить команду «free -m», чтобы показать количество памяти, но я реализовал мониторинг, который показал, что последнее отправленное значение было (RAM свободна, буферы свободны, Swap свободны) (3597MB, 5793, 5783).
Сервер имеет много соединений TIME_WAIT в netstat, несмотря на то, что я изменил tcp_fin_timeout на 15 (9155 TIME_WAIT, 55 ESTABLISHED). Мне удалось запустить только ulimits -a
core file size (blocks, -c) 0
data seg size (kbytes, -d) unlimited
max nice (-e) 0
file size (blocks, -f) unlimited
pending signals (-i) 88064
max locked memory (kbytes, -l) 32
max memory size (kbytes, -m) unlimited
open files (-n) 1024
pipe size (512 bytes, -p) 8
POSIX message queues (bytes, -q) 819200
max rt priority (-r) 0
stack size (kbytes, -s) 10240
cpu time (seconds, -t) unlimited
max user processes (-u) 88064
virtual memory (kbytes, -v) unlimited
file locks (-x) unlimited
PS. Это не VPS. Это DELL.
Если у вас есть представление о том, какие процессы вызывают все это (например, Apache), вы можете попытаться выйти из этой ситуации с помощью команды exec killall -9 httpd. Это заменяет текущую оболочку программой killall, которая, как мы надеемся, устраняет вредоносные процессы, позволяя вам продолжить анализ проблемы. Однако будьте осторожны, это одноразовая попытка, после чего оболочка в сеансе экрана исчезнет, поэтому, если это не удастся, вам потребуется жесткая перезагрузка.