Назад | Перейти на главную страницу

Куда идут накладные расходы на ZFS RAIDZ2 на дисках с сектором 4K?

Я начал с создания 16 пустых файлов размером ровно 1 миллиард байт:

for i in {1..16}; do dd if=/dev/zero of=/mnt/temp/block$i bs=1000000 count=1000 &> /dev/null; done

Затем я создал все большие и большие тома RAIDZ2 поверх файлов, заставив ashift = 12 имитировать диск с сектором 4K, например

zpool create tank raidz2 -o ashift=12 /mnt/temp/block1 /mnt/temp/block2...

а затем сравнил, используя df -B1 чтобы увидеть реальный размер.

Filesystem  1B-blocks
tank        12787777536

Мои результаты:

+-------+-------------+-------------+------------+------------+
| disks |  expected   |   actual    |  overhead  | efficiency |
+-------+-------------+-------------+------------+------------+
|     3 |  1000000000 |   951975936 |   48024064 | 95.2       |
|     4 |  2000000000 |  1883766784 |  116233216 | 94.2       |
|     5 |  3000000000 |  2892234752 |  107765248 | 96.4       |
|     6 |  4000000000 |  3892969472 |  107030528 | 97.3       |
|     7 |  5000000000 |  4530896896 |  469103104 | 90.6       |
|     8 |  6000000000 |  5541068800 |  458931200 | 92.4       |
|     9 |  7000000000 |  6691618816 |  308381184 | 95.6       |
|    10 |  8000000000 |  7446331392 |  553668608 | 93.1       |
|    11 |  9000000000 |  8201175040 |  798824960 | 91.1       |
|    12 | 10000000000 |  8905555968 | 1094444032 | 89.1       |
|    13 | 11000000000 | 10403577856 |  596422144 | 94.6       |
|    14 | 12000000000 | 11162222592 |  837777408 | 93.0       |
|    15 | 13000000000 | 12029263872 |  970736128 | 92.5       |
|    16 | 14000000000 | 12787908608 | 1212091392 | 91.3       |
+-------+-------------+-------------+------------+------------+

В виде диаграммы:

  1. Мои результаты верны или я что-то упустил?
  2. Если они правы, почему? Куда идет космос?
  3. Могу я что-нибудь сделать для повышения эффективности?
  4. Есть ли формула для расчета эффективности?

Яркий ответ, потому что RAIDZ (2) отстой на 4k дисках.

  • Выпуск # 548: Очень неэффективное использование пространства наблюдается при использовании raidz2 с ashift = 12
  • Выпуск # 1807: zvol на RAIDZ2 занимает вдвое больше ожидаемого места # 1807

Это связано с тем, что вычисления четности занимают огромное количество дополнительного места, особенно для файлов меньшего размера. Попробуйте выполнить тот же тест с файлами размером менее 50 МБ, если вы хотите увидеть реальную неэффективность.