Назад | Перейти на главную страницу

При какой рабочей нагрузке требуется параллельная (сетевая) файловая система?

Любые точные цифры или предварительные правила, для какой рабочей нагрузки (например, с точки зрения одновременно активных пользователей, выполняющих средние задания центра HPC) в компьютерном кластере, которые могли бы создать параллельную сетевую общую файловую систему, такую ​​как Lustre, GPFS, Ibrix или Панасас, требование?

... то есть, когда общего хранилища SAN NFS уже недостаточно, и вам нужно какое-то параллельно NAS?

РЕДАКТИРОВАТЬ: Добавлен «NFS shared» перед «SAN».

Во-первых, в HPC нет никакого "среднего", о котором я знаю - я имел удовольствие работать в трех средах HPC, и все три имели совершенно разную динамику (в классических терминах моделирования узких мест одна была привязана к диску, один был связан с процессором, а другой с ограничением памяти).
Это напрямую ведет к моему ответу на ваш вопрос: вам нужен «какой-то параллельный NAS», когда вы привязаны к диску до такой степени, что это влияет на производительность. Вы поймете, что это тот случай, когда вы больше не можете загружать все свои процессоры (и у вас все еще есть свободная оперативная память или некоторые узлы полностью простаивают, ожидая на диске).

Если ваша текущая система хранения имеет функции мониторинга производительности, вы можете следить за своей статистикой и планировать действия, когда вы скажете 66% или 75% от максимальных значений производительности, но нет жесткого и быстрого правила, которое гласит: «X узлов, Y задачи - теперь вам нужно развернуть GPFS. "

Вы сравниваете яблоки и апельсины. SAN предоставляет логические тома, а не файловые системы. Если у вас есть несколько систем, пытающихся смонтировать один и тот же логический том в качестве записываемого (т.е. даже с включенным временем доступа), тогда вам понадобится файловая система, поддерживающая одновременный доступ.

Обычно термин NAS применяется к системе, которая предоставляет службы обмена файлами, такие как NFS или SMB, что делает использование кластерной файловой системы избыточным (только контроллер обращается к файловой системе напрямую). Однако этот термин иногда применяется к протоколу iSCSI - и в этом случае устройство ведет себя как SAN.