Назад | Перейти на главную страницу

сетевое хранилище для исследовательской группы, 10-100 ТБ

это связано с этим сообщением:

Масштабируемая (> 24 ТБ) NAS для исследовательского отдела

но, возможно, немного более общий.

Задний план:

Мы - исследовательская лаборатория, в которой работают около 10 человек, которые проводят множество экспериментов, в ходе которых фотографируют одну из нескольких лабораторных установок, а затем анализируют ее на одном из нескольких лабораторных компьютеров. Каждый эксперимент может дать 2 или 3 ГБ данных, и мы генерируем данные со скоростью около 10 ТБ в год.

Прямо сейчас мы храним данные на netgear readynas pro с 6 отсеками, но даже с диском 2 ТБ это дает нам только 10 ТБ хранилища. Кроме того, сейчас мы вообще не выполняем резервное копирование. Наш краткосрочный план резервного копирования состоит в том, чтобы получить вторую readynas, разместить ее в другом здании и отразить один диск на другом. Очевидно, это несколько неидеально.

Наши варианты:

1) Мы можем платить нашему университету 400 долларов за ТБ в год за «резервное» онлайн-хранилище. Мы доверяем им больше, чем нам, но не сильно.

2) Мы можем продолжать покупать небольшие NAS и зеркалировать их между офисами. Одно ограничение, хотя и глупое, заключается в том, что у нас нет неограниченного количества разъемов Ethernet.

3) Мы можем попробовать реализовать собственное решение для хранения данных, поэтому я и прошу вас, ребята.

Следует учитывать, что мы очень преходящее население и никто из нас не является экспертом в области сетевого администрирования. Я, наверное, пробуду здесь всего год или около того, а у аспирантов, которые здесь дольше всех, есть шкала времени 5-6 лет. Так что ничего не может потребовать экспертного надзора.

Наши скорости передачи данных невысоки - большая часть данных будет просто находиться на сервере, ожидая, пока кто-нибудь их просмотрит один или два раза, поэтому нам не нужна действительно высокоскоростная система.

Учитывая эти ограничения, может ли кто-нибудь порекомендовать достаточно недорогую, масштабируемую, более или менее готовую систему общего хранения данных с резервным копированием в отдельном физическом месте. Существует ли такая вещь, или мы должны просто заплатить университету, чтобы он позаботился об этом за нас?

Второй вопрос: наш профессор только что получил должность и составляет бюджет. Здесь цель - попросить как можно больше и надеяться, что вы получите часть этого. Так что тот же вопрос, за исключением дешевизны. Можете ли вы порекомендовать масштабируемую систему хранения резервных копий под ключ без бюджетных ограничений.

Спасибо

Думаю, это один из тех случаев, когда вам следует передать это на аутсорсинг. Позвольте ИТ-отделу университета управлять хранилищем, он позаботится о резервном копировании и обслуживании хранилища. Так будет лучше в долгосрочной перспективе.

На сайте компании, разработавшей систему для собственного использования, есть отличная и чрезвычайно подробная статья о создании «модулей» NAS. http://www.backblaze.com/petabytes-on-a-budget-how-to-build-cheap-cloud-storage.html . Они описывают его как «67 ТБ за 7 867 долларов», что очень неплохо. Они запускают JFS поверх томов RAID-6 под Debian; Затем они предлагают это через https, но ничто не мешает вам вставить туда (например) SaMBa (вы не говорите, какой у вас текущий протокол удаленного доступа к файлам).

Отказ от ответственности: я ничего не знаю об этих людях, кроме того, что я читал, и я не пробовал построить ни одного из них сам. Тем не менее, если они не подделывали фотографии, они действительно создают и развертывают кучу этих вещей, и они еще не обанкротились.

Изменить: мне потребовалось немного больше времени, чтобы найти конкретный поставщик список (подробный части список находится в исходной ссылке выше), но он находится в http://blog.backblaze.com/2009/10/07/backblaze-storage-pod-vendors-tips-and-tricks/#more-199 . Я действительно восхищаюсь тем, как эти ребята открыли свою подробную инфраструктуру для повторного использования; но как говорится в исходном посте:

Наконец, мы благодарим тысячи инженеров, которые потратили миллионы часов на то, чтобы доставить нам недорогие или полностью бесплатные компоненты для модулей, такие как процессор Intel, Gigabit Ethernet, жесткие диски с невероятно высокой плотностью, Linux, Tomcat, JFS и т. Д. Мы понимаем, что стоим на плечах гигантов.

Я не знаю об их продукте (у меня есть собственный накопитель на магнитной ленте для резервного копирования), но я одобряю их скромность.

Спросите сотрудников вашего университета, существует ли меньший уровень хранилища. Возможно, что-то, что не резервировано или копируется только еженедельно / ежемесячно. Если есть вариант «без резервного копирования» по более низкой цене, то купите в 2–3 раза больше хранилища и напишите несколько сценариев для полуавтоматического резервного копирования. Резервное копирование, особенно резервное копирование на магнитную ленту, может составлять две трети стоимости сетевого хранилища.

Также спросите, предлагают ли они «оперативное хранилище».