Назад | Перейти на главную страницу

/etc/security/limits.conf soft nproc limit игнорируется

Моя база данных MongoDB столкнулась с проблемами под нагрузкой, со следующими ошибками в журналах:

[initandlisten] pthread_create failed: errno:11 Resource temporarily unavailable
[initandlisten] can't create new thread, closing connection

Я пришел к выводу, что мне нужно поднять параметр «ulimit -u» или «Максимальное количество процессов», которые были на уровне 1024, и использование могло превышать это значение, учитывая запущенные веб-интерфейсы (не знаю, как это проверить) .

Я отредактировал /etc/security/limits.conf, чтобы добавить последние две строки (первые две уже были):

*                soft    nofile          350000
*                hard    nofile          350000
*                soft    nproc           30000
*                hard    nproc           30000

Затем я перезагрузил систему (кстати, я должен был это сделать, или перезапуска службы mongod будет достаточно?)

После перезагрузки, просмотрев ограничения процесса для процесса mongod, кажется, что мягкий предел был проигнорирован:

$ cat /proc/2207/limits
Limit                     Soft Limit           Hard Limit           Units
Max cpu time              unlimited            unlimited            seconds
Max file size             unlimited            unlimited            bytes
Max data size             unlimited            unlimited            bytes
Max stack size            8388608              unlimited            bytes
Max core file size        0                    unlimited            bytes
Max resident set          unlimited            unlimited            bytes
Max processes             1024                 30000                processes
Max open files            350000               350000               files
Max locked memory         65536                65536                bytes
Max address space         unlimited            unlimited            bytes
Max file locks            unlimited            unlimited            locks
Max pending signals       273757               273757               signals
Max msgqueue size         819200               819200               bytes
Max nice priority         0                    0
Max realtime priority     0                    0
Max realtime timeout      unlimited            unlimited            us

$ whoami
mongod


$ ulimit -a
core file size          (blocks, -c) 0
data seg size           (kbytes, -d) unlimited
scheduling priority             (-e) 0
file size               (blocks, -f) unlimited
pending signals                 (-i) 273757
max locked memory       (kbytes, -l) 64
max memory size         (kbytes, -m) unlimited
open files                      (-n) 350000
pipe size            (512 bytes, -p) 8
POSIX message queues     (bytes, -q) 819200
real-time priority              (-r) 0
stack size              (kbytes, -s) 8192
cpu time               (seconds, -t) unlimited
max user processes              (-u) 1024
virtual memory          (kbytes, -v) unlimited
file locks                      (-x) unlimited

Я ожидал, что «Максимальное количество процессов» как жесткое, так и мягкое ограничение будет на уровне 30000 согласно файлу /etc/security/limits.conf, но только жесткое ограничение.

Что я делаю не так?

Я использую Amazon Linux на AWS EC2.

bash-4.1$ cat /etc/*-release
Amazon Linux AMI release 2012.09

Проверьте файл /etc/security/limits.d/90-nproc.conf, так как он может изменить ваши настройки. Я писал об этой же самой проблеме в прошлом году http://scott.cm/max-processes-1024-limits-conf/

Вы можете попробовать изменить значение ulimit в начале сценария, запускающего базу данных mongodb.

Дочерний процесс наследует ограничения ресурсов от вызывающего процесса.