У нас есть postgres 9.1, работающий на Ubuntu. Размер базы данных postgres составляет 155 ГБ и около 13200 таблиц. Коробка Ubuntu имеет 120 ГБ оперативной памяти. Коробка Ubuntu - это докер-контейнер.
Когда была сделана попытка сделать резервную копию БД, не удалось сказать:
pg_dump: WARNING: out of shared memory
pg_dump: SQL command failed
pg_dump: Error message from server: ERROR: out of shared memory
HINT: You might need to increase max_locks_per_transaction.
Таким образом, мы увеличили ценность max_locks_per_transaction
до 1024 дюймов postgresql.conf
, но postgres не запускается.
root@abc:# /etc/init.d/postgresql restart
* Restarting PostgreSQL 9.1 database server
* The PostgreSQL server failed to start. Please check the log output:
2018-02-04 03:27:22 UTC FATAL: could not create shared memory segment: Invalid argument
2018-02-04 03:27:22 UTC DETAIL: Failed system call was shmget(key=5432001, size=70123520, 03600).
2018-02-04 03:27:22 UTC HINT: This error usually means that PostgreSQL's request for a shared memory
segment exceeded your kernel's SHMMAX parameter. You can either reduce the request size or reconfigure
the kernel with larger SHMMAX. To reduce the request size (currently 70123520 bytes), reduce PostgreSQL's
shared memory usage, perhaps by reducing shared_buffers or max_connections. If the request size is
already small, it's possible that it is less than your kernel's SHMMIN parameter, in which case raising
the request size or reconfiguring SHMMIN is called for. The PostgreSQL documentation contains more information
about shared memory configuration.
Итак, когда мы попытались изменить значение SHMMAX
, это не удалось:
# echo 1134217728 >/proc/sys/kernel/shmmax
bash: /proc/sys/kernel/shmmax: Read-only file system
Есть идеи, что не так и как это сделать?
Коробка Ubuntu - это докер-контейнер.
Набор контейнеров ограничения на память, и используйте Пространства имен IPC, а ограничение shm по умолчанию далеко не достаточно велико для работы с большими базами данных. Вам нужно будет настроить более высокие пределы в команде запуска. Если в контейнере имеется более ста ГБ памяти для использования, вы можете установить ограничение shm довольно высоким, может быть, 8 ГБ.
docker run -m 120G --sysctl kernel.shmmax=8589934592 --sysctl kernel.shmall=2097152
Документация PostgreSQL по Управление ресурсами ядра - хорошая ссылка, но не упоминаются контейнеры.