Я младший системный администратор одной из инженерных школ. Один из профессоров получил в дар 45 серверов (Dell Poweredge 1690) от Yahoo. Ниже приведены его требования:
hadoop (mapreduce) в Linux (какая разновидность Linux и Hadoop?)
свинья поверх хадупа
Дриада поверх Windows
MPI в Linux
возможно другое программное обеспечение, скажем, для облачных вычислений
Я хотел бы создать кластер с помощью VMware, чтобы я мог оптимально использовать оборудование. Я очень новичок в виртуализации. Может ли кто-нибудь подсказать мне, как это сделать. Я действительно с нетерпением жду работы над этим проектом, так как он даст мне хорошее представление и немного практического опыта.
Это будет лаборатория, в которую будут входить одновременно многие студенты. Я планирую использовать аутентификацию LDAP, которая будет аутентифицировать студентов с помощью нашей Active Directory.
Итак, как мне это сделать? Какая стратегия будет лучшей в этом сценарии? Любой вклад приветствуется. Спасибо.
Похоже, у вас есть гора знаний, на которую нужно подняться, я сомневаюсь, что вы сможете адекватно спроектировать то, что ищете, не изучая все технологии в течение целого года или около того.
Тем не менее, я бы забыл использовать что-то необычное, например Hadoop. Вы не упомянули, какое у вас хранилище, но я бы попытался собрать воедино какую-то SAN, возможно, работающую на FreeNAS, предоставляющую цели iSCSI. Hyper-V Server является бесплатным и может формировать до 16 кластеров узлов. SCVMM довольно дешев с образовательной скидкой и сможет предоставить портал самообслуживания с AD Auth, чтобы позволить студентам или исследователям получать доступ к кластерам, развертывать предварительно настроенные виртуальные машины или предоставлять свои собственные (множество вариантов конфигурации). Можно добавить другие технологии, чтобы сделать его более или менее сложным в соответствии с вашими требованиями (именно здесь вы попадете в «облако» (я ненавижу этот маркетинговый термин, но, очевидно, это то, что вы знаете) технологий, которые обеспечивают высокую доступность, динамическую нагрузку балансировка, распределение нагрузки, упреждающее управление и т. д.).
Продукты VMWare могут обеспечивать большую часть той же функциональности, но я не так хорошо знаком с их линейкой, поэтому я не мог сказать, будет это дешевле или нет.
К сожалению, ваш вопрос довольно расплывчатый относительно того, чего вы хотите достичь. На этом сайте много системных администраторов, и мы знаем, что хороший набор требований - залог успешного проекта. Вбросить в проект алфавитный суп из технологий и надеяться, что все они будут работать вместе, - это рецепт катастрофы. Мы будем рады поработать с вами, но вам действительно нужен хороший набор требуемых результатов, прежде чем начинать проект.