Мой сервер CentOS7 64 бит идет под kernel panic выпуск и перезагружен после каждого дня с 7 до 8 утра. Вот часть dmesg
[ 536.606448] tun: (C) 1999-2004 Max Krasnyansky <maxk@qualcomm.com>
[82341.807403] INFO: task sync:6493 blocked for more than 300 seconds.
[82341.807406] Tainted: P O 3.14.39ltsi-ayan-130.0.33 #1
[82341.807407] "echo 0 > /proc/sys/kernel/hung_task_timeout_secs" disables this message.
[82341.807408] sync D ffffffff81a0b3c0 0 6493 1 0x00000000
[82341.807410] ffff8801ed563d80 0000000000000086 0000000000009000 ffff880308cb4800
[82341.807412] ffff8803f962b000 ffff8801ed563fd8 ffff880308cb4800 ffff8803f922f600
[82341.807413] ffff8801ed563d60 ffff8801ed563e98 7fffffffffffffff ffff8801ed563e90
[82341.807415] Call Trace:
[82341.807421] [<ffffffff81802029>] schedule+0x29/0x70
[82341.807422] [<ffffffff81801169>] schedule_timeout+0x199/0x280
[82341.807426] [<ffffffff81085d42>] ? __queue_delayed_work+0xa2/0x1b0
.
.
.
[82341.807867] Code: 00 00 48 8d 86 38 c0 ff ff 48 89 d1 0f 01 c8 65 48 8b 04 25 70 a8 00 00 48 8b 80 38 c0 ff ff a8 08 75 08 b1 01 4c 89 e0 0f 01 c9 <65> 48 8b 04 25 70 a8 00 00 83 a0 3c c0 ff ff fb 0f ae f0 65 48
[82341.808450] Kernel panic - not syncing: hung_task: blocked tasks
[82341.814824] CPU: 0 PID: 75 Comm: khungtaskd Tainted: P O 3.14.39ltsi-ayan-130.0.33 #1
Что я понял из dmesg, синхронизировать это процесс с pid-6490 ожидает операции с ДИСКОМ и заблокирован на 300 с, потому что ДИСК загружен другим процессом. синхронизировать переходит в состояние процесса D (непрерывный сон).
Год назад, когда я впервые увидел проблему паники, решенную настройкой sysctl.conf файл, то проблема исчезла. Руководствуясь сайтом https://www.blackmoreops.com/2014/09/22/linux-kernel-panic-issue-fix-hung_task_timeout_secs-blocked-120-seconds-problem/
Вот текущая конфигурация /etc/sysctl.conf
kernel.hung_task_timeout_secs = 300
vm.dirty_background_ratio = 5
vm.dirty_ratio = 10
Я настраивал ежедневно cron работа задача резервного копирования данных pgsql БД. Размер данных около 200 ГБ и еще несколько задач.
Детали сервера:
Filesystem Size Used Avail Use% Mounted on
total 3.7T 1.1T 2.6T 30%
RAM: 16GB