Я вижу очень странные характеристики производительности на одном из моих серверов. Этот сервер работает под управлением простой двухдисковой программной настройки RAID1 с охватом LVM /dev/md0
. Один из логических томов /dev/vg0/secure
зашифрован с помощью dmcrypt с LUKS и смонтирован с помощью sync
и noatimes
флаг. Запись на этот том невероятно медленная - 1,8 МБ / с, а загрузка ЦП остается около 0%. Всего 8 crpyto/1-8
запущенные процессы (это процессор Intel Quadcore).
Я надеюсь, что кто-то на serverfault видел это раньше :-(.
uname -a
2.6.32-5-xen-amd64 #1 SMP Tue Mar 8 00:01:30 UTC 2011 x86_64 GNU/Linux
Интересно, что когда я читаю с устройства, я получаю хорошие показатели производительности:
чтение без шифрования:
$ dd if=/dev/vg0/secure of=/dev/null bs=64k count=100000
100000+0 records in
100000+0 records out
6553600000 bytes (6.6 GB) copied, 68.8951 s, 95.1 MB/s
чтение с шифрованием:
$ dd if=/dev/mapper/secure of=/dev/null bs=64k count=100000
100000+0 records in
100000+0 records out
6553600000 bytes (6.6 GB) copied, 69.7116 s, 94.0 MB/s
Однако, когда я пытаюсь записать на устройство:
$ dd if=/dev/zero of=./test bs=64k
8809+0 records in
8809+0 records out
577306624 bytes (577 MB) copied, 321.861 s, 1.8 MB/s
Кроме того, когда я читаю, я вижу использование ЦП, когда я пишу, ЦП остается почти на 0%. Вот вывод cryptsetup luksDump
:
LUKS header information for /dev/vg0/secure
Version: 1
Cipher name: aes
Cipher mode: cbc-essiv:sha256
Hash spec: sha1
Payload offset: 2056
MK bits: 256
MK digest: dd 62 b9 a5 bf 6c ec 23 36 22 92 4c 39 f8 d6 5d c1 3a b7 37
MK salt: cc 2e b3 d9 fb e3 86 a1 bb ab eb 9d 65 df b3 dd
d9 6b f4 49 de 8f 85 7d 3b 1c 90 83 5d b2 87 e2
MK iterations: 44500
UUID: a7c9af61-d9f0-4d3f-b422-dddf16250c33
Key Slot 0: ENABLED
Iterations: 178282
Salt: 60 24 cb be 5c 51 9f b4 85 64 3d f8 07 22 54 d4
1a 5f 4c bc 4b 82 76 48 d8 a2 d2 6a ee 13 d7 5d
Key material offset: 8
AF stripes: 4000
Key Slot 1: DISABLED
Key Slot 2: DISABLED
Key Slot 3: DISABLED
Key Slot 4: DISABLED
Key Slot 5: DISABLED
Key Slot 6: DISABLED
Key Slot 7: DISABLED
Может быть, вы используете новые жесткие диски с секторами размером более 512 байт (например, 4K)? Если да, вам определенно стоит позаботиться о выравнивании дисков. Для дальнейшего чтения просмотрите следующие ссылки, описывающие проблему:
http://bartsjerps.wordpress.com/2011/02/22/disk-alignment-linux/
http://tannerjc.net/wiki/index.php?title=Disk_Alignment
Спасибо