Я ищу идеи для решений для хранения в диапазоне 70–100 ТБ.
Данные, которые будут храниться, будут в основном зашифрованными образами резервных копий для ShadowProtect.
Данные должны регулярно обрабатываться оконным приложением ImageManager, которое объединяет и проверяет резервные копии. Кажется, что приложение не так дружелюбно, когда у него есть большие репозитории резервных копий, поэтому первоначальная мысль для решения этой проблемы - разделить его рабочую нагрузку на 3-4 виртуальных машины.
Текущая идея состоит в том, чтобы иметь мощный сервер хранения и модуль DAS, работающий под управлением HyperV, разделив пул дисков на группы через Windows Storage Spaces, чтобы каждая виртуальная машина имела свое собственное отдельное выделение памяти.
Сервер хранения, сервер HP Gen 9 и DAS, с 144 ТБ необработанного пространства, в основном состоящий из дисков SAS на 8 ТБ.
Могу я получить некоторые мысли по поводу вышеизложенного?
Какие варианты дизайна можно было бы посмотреть?
Спасибо!
Если мы говорим о СХД с таким большим количеством накопителей, это обязательно должен быть белый ящик, поскольку любое проприетарное решение будет стоить значительно дороже. Кроме того, вы добьетесь значительного сокращения пространства за счет дедупликации и сжатия. Особенно, если это оперативная дедупликация, в этом случае весь аналогичный объем данных, записываемых в массив, сокращается на лету. В целом дисковые пространства - отличное решение, но им не хватает функций дедупликации и сжатия. Разделение рабочей нагрузки между виртуальными машинами не так эффективно из-за накладных расходов Hyper-V, это снижает производительность хранилища. Лучше было бы вместо этого разделить нагрузку на уровень хранилища. Например, разделите общие ресурсы SMB или создайте несколько целей iSCSI. В этой ситуации вы можете взглянуть на NIMBLE как хорошее и зрелое решение. Точно так же StarWind Virtual SAN Бесплатно с файловой системой со структурой журнала (LSFS) со встроенной дедупликацией может быть вариантом. StarWind имеет несколько уровней функциональности кеширования. Во-первых, это кэш ОЗУ, он может работать в режиме обратной записи, что увеличивает производительность RAID в целом. Второй - SSD-кеш, который работает в режиме сквозной записи и увеличивает количество операций ввода-вывода в секунду при чтении. Вы можете создать один или несколько RAID-массивов и соединить цели iSCSI, чтобы ускорить работу вашей среды. Приемлемым выбором здесь может быть белая рамка Устройство хранения от StarWind. Надеюсь, поможет.