DL160 G5 + VMware ESXi + Xyratex F5412E

Технологии постороения кластеров (вычислительных и отказоустойчивых), настройка терминал серверов,
SAN , NAS, FibreChannel, Infiniband

Модераторы: Trinity admin`s, Free-lance moderator`s

tushka
member
Сообщения: 34
Зарегистрирован: 20 авг 2009, 17:39
Откуда: SPb

DL160 G5 + VMware ESXi + Xyratex F5412E

Сообщение tushka » 20 авг 2009, 18:29

Здравствуйте, All

есть 2 сервера DL160G5, 8 ядер, память набивается до 32Gb, 4 дырки под HDD
планируется запустить на них до 20 виртуальных серверов (10 на сервер). Предполагается использование VMware ESXi.
каждая виртуалка потребует минимум 20Гб дискового пространства, в дальнейшем возможно надо будет расширять. Винты явно требуются быстрые - поэтому будут использоваться SAS 15000rpm. Суммарно получается виртуалки будут кушать 200Гб минимум. НО - есть мнение, что по производительности зеркало из двух SAS 300Gb 15000rpm не справится - не хватит IOPs. Поэтому, я подозреваю, что сервер, хотя и выдержит по процессорной мощности и памяти 10 виртуалок, сдохнет на скорости работы с HDD.
(вторые HDD дырки конечно планируется занять зеркалом под хостовую систему - запускать ESXi с флешки прошу не предлагать)

Получается, что надо брать массив с фиброй - чего уж там мелочиться - и подключать к массиву эти DL160G5.

Массив предполагается Xyratex F5412E.

В моем мозгу зародился нижеописанный план - но не уверен, что сработает. Инфы, к сожалению, не нашел.

Виртуалки будут появляться не все сразу - а постепенно.
Поставить в эти DL160G5 по зеркалу из SAS 146Gb 15000rpm. На каждом сервере поднять для начала до 4 виртуалок. Затем купить массив Xyratex F5412E с 4мя SAS 146Gb 15000rpm, сделать из них RAID-10. Подключить 1й сервер, смигрировать на массив виртуалки, диски SAS 146Gb 15000rpm переставить в массив, расширить на них RAID-10.
Подключить 2й сервер, смигрировать на массив оставшиеся виртуалки, диски SAS 146Gb 15000rpm снова переставить в массив, снова расширить на них RAID-10.

Вариант нравится тем, что позволяет удешевить старт проекта, так как массив будет куплен не сразу.

Вопрос - реально ли сделать такой финт ушами? позволит ли это ESXi? Вообще - ESXi будет работать в таком конфиге - 2 шт DL160G5 + Xyratex F5412E, используя массив?
Правильно ли я понимаю, что эти 2 шт DL160G5 надо будет натравливать на разные LUNы на массиве? Или надо будет делать какой-то кластер?
Смогу ли я сначала на сервере на зеркале сделать отдельный LUN для каждой виртуалки, а затем перевезти эти LUN (или данные из них) на массив?

Заранее благодарю за ответы.

Bormoto
Advanced member
Сообщения: 253
Зарегистрирован: 06 июл 2007, 22:20
Откуда: спб

Re: DL160 G5 + VMware ESXi + Xyratex F5412E

Сообщение Bormoto » 20 авг 2009, 19:43

Мне план нравится. EOL для серверов (т.к. "brand name", то это важно); содержание массива RAID1 с vm на HBA; закупка хранилища, в котором сначала будет не хватать 8 салазок для HDD - можно чаще общаться с поставщиком. Все это должно приблизить триумф. :-)
По перемещению vm потом - если допустим off-line для перемещаемых vm, то двигать ими можно будет почти как угодно. При покупке оптических HBA не забудьте заглянуть в HCL. ;-)
На Vmware HA или VMotion придется раскошелиться. Или псевдо-HA скриптами.
Если цель планируемых действий - наработка опыта на оборудовании работодателя, то можно воспользоваться свободно распространяемыми XenServer 5.5 от Citrix или Hyper-V 2008 R2 от MS. У них функциональность пошире, чем у бесплатного варианта ESXi.

Аватара пользователя
diz
Advanced member
Сообщения: 1189
Зарегистрирован: 12 янв 2009, 12:09
Откуда: Пермь

Re: DL160 G5 + VMware ESXi + Xyratex F5412E

Сообщение diz » 21 авг 2009, 07:06

1. А HP`шные винты будут работать в xyratex? Может правильнее взять полку от HP?
2. Сконфигурируйте 4 винта в raid 10 на первом этапе, отрежьте LUN под ESXi, остальное под виртуалки. Когда перейдете на SAN и купите платный VMWare - поставите полный ESX, переставите винты в HP`шный массив (не знаю, как в HP, а в IBM ds3400 так можно) и будете грузиться с SAN.

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: DL160 G5 + VMware ESXi + Xyratex F5412E

Сообщение Stranger03 » 21 авг 2009, 07:49

tushka писал(а):Вопрос - реально ли сделать такой финт ушами? позволит ли это ESXi? Вообще - ESXi будет работать в таком конфиге - 2 шт DL160G5 + Xyratex F5412E, используя массив?
Работать будет, только придется немного приложить рук и головы.
Правильно ли я понимаю, что эти 2 шт DL160G5 надо будет натравливать на разные LUNы на массиве? Или надо будет делать какой-то кластер?
Это будет зависеть от вмвари и того, что хочется в итоге. Если нужны будут автоматический переезд виртуалок, то стоить взять сразу адвансед версию. Правда здесь стоимость софта будет побольше чем стоимость трех железов вместе
Смогу ли я сначала на сервере на зеркале сделать отдельный LUN для каждой виртуалки, а затем перевезти эти LUN (или данные из них) на массив?
Не понял вопроса
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: DL160 G5 + VMware ESXi + Xyratex F5412E

Сообщение Stranger03 » 21 авг 2009, 07:50

Bormoto писал(а): На Vmware HA или VMotion придется раскошелиться.
Отдельно эти опции уже не продаются.
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: DL160 G5 + VMware ESXi + Xyratex F5412E

Сообщение Stranger03 » 21 авг 2009, 07:55

diz писал(а):1. А HP`шные винты будут работать в xyratex? Может правильнее взять полку от HP?
Работать конечно будет. Правильнее брать ХП, но она обойдется раза в 1.5 дороже.
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

tushka
member
Сообщения: 34
Зарегистрирован: 20 авг 2009, 17:39
Откуда: SPb

Re: DL160 G5 + VMware ESXi + Xyratex F5412E

Сообщение tushka » 21 авг 2009, 14:06

Bormoto писал(а):EOL для серверов (т.к. "brand name", то это важно)
ну и что? выкинуть их что ли?
Bormoto писал(а):содержание массива RAID1 с vm на HBA)
это в каком месте??? не понял.
Bormoto писал(а):закупка хранилища, в котором сначала будет не хватать 8 салазок для HDD - можно чаще общаться с поставщиком.
это дело десятое - конечно при покупке массива я постараюсь найти где-то салазки, с б\у винтов, в сервис-центрах и т.д.
Bormoto писал(а):Все это должно приблизить триумф. :-)
я слышу сарказм или мне кажется?

tushka
member
Сообщения: 34
Зарегистрирован: 20 авг 2009, 17:39
Откуда: SPb

Re: DL160 G5 + VMware ESXi + Xyratex F5412E

Сообщение tushka » 21 авг 2009, 14:08

diz писал(а):Сконфигурируйте 4 винта в raid 10 на первом этапе, отрежьте LUN под ESXi, остальное под виртуалки. Когда перейдете на SAN и купите платный VMWare - поставите полный ESX, переставите винты в HP`шный массив (не знаю, как в HP, а в IBM ds3400 так можно) и будете грузиться с SAN.
т.е. сделать raid 10 на каждом сервере? и потом этот raid 10 в количестве два штука я переставлю в массив? и массив их примет? и у меня будет 2 штука raid 10 в массиве?

tushka
member
Сообщения: 34
Зарегистрирован: 20 авг 2009, 17:39
Откуда: SPb

Re: DL160 G5 + VMware ESXi + Xyratex F5412E

Сообщение tushka » 21 авг 2009, 14:11

Stranger03 писал(а):Работать будет, только придется немного приложить рук и головы.
А не могли бы Вы рассказать чуть более подробно - какую часть тела к какому месту прикладывать? ;о)

Аватара пользователя
diz
Advanced member
Сообщения: 1189
Зарегистрирован: 12 янв 2009, 12:09
Откуда: Пермь

Re: DL160 G5 + VMware ESXi + Xyratex F5412E

Сообщение diz » 21 авг 2009, 14:49

tushka писал(а):т.е. сделать raid 10 на каждом сервере? и потом этот raid 10 в количестве два штука я переставлю в массив? и массив их примет? и у меня будет 2 штука raid 10 в массиве?
Нет, работать не будет :) Просто этот вариант лучше чем два зеркала на 4х винтах. Переносить придется созданием массива на СХД с последующим растягиванием на диски, которые Вы переставите из серверов. Правда, экономия смешная получается на фоне цены СХД и VMWare. Опять же, не стоит мешать в один массив диски разных типов (в СХД Вы же родные для СХД будете покупать?). Если же будете докупать туда HP`шные диски тогда смысл того, чтобы взять СХД от HP только увеличивается.
Последний раз редактировалось diz 21 авг 2009, 14:54, всего редактировалось 2 раза.

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: DL160 G5 + VMware ESXi + Xyratex F5412E

Сообщение Stranger03 » 21 авг 2009, 14:50

tushka писал(а):А не могли бы Вы рассказать чуть более подробно - какую часть тела к какому месту прикладывать? ;о)
Прикладывать можно любую, но соблюдать два самых важных правила:
1. прикладываемая часть не должна быть больной
2. важна не прикладываемая часть, а результат
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: DL160 G5 + VMware ESXi + Xyratex F5412E

Сообщение Stranger03 » 21 авг 2009, 14:52

tushka писал(а):т.е. сделать raid 10 на каждом сервере? и потом этот raid 10 в количестве два штука я переставлю в массив? и массив их примет? и у меня будет 2 штука raid 10 в массиве?
Сконфигурить рейд в сервере на дисках, потом переставить в массив чтобы он там определился? Это работает только с джибодами, и то не со всеми.
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

Bormoto
Advanced member
Сообщения: 253
Зарегистрирован: 06 июл 2007, 22:20
Откуда: спб

Re: DL160 G5 + VMware ESXi + Xyratex F5412E

Сообщение Bormoto » 21 авг 2009, 18:06

tushka писал(а):
Bormoto писал(а):EOL для серверов (т.к. "brand name", то это важно)
ну и что? выкинуть их что ли?
Использовать для задач, для которых время простоя или стоимость ремонта/модернизации не имеют значения.
tushka писал(а):
Bormoto писал(а):содержание массива RAID1 с vm на HBA)
это в каком месте??? не понял.
До покупки внешнего хранилища планируется размещать vm на дисковой системе серверов на RAID1. Так? На DL160G5 для SAS дисков это будет HBA HP SC40Ge. Так? Сомнительное решение для vm. Хотя, конечно, все возможно - нагрузка ведь неизвестна.
tushka писал(а):
Bormoto писал(а):закупка хранилища, в котором сначала будет не хватать 8 салазок для HDD - можно чаще общаться с поставщиком.
это дело десятое - конечно при покупке массива я постараюсь найти где-то салазки, с б\у винтов, в сервис-центрах и т.д.
Если сумеете накупить салазок к хранилищу Xyratex, можно будет устроить недурную коммерцию. Думаю, и по 50 $/шт. пойдут.
tushka писал(а):
Bormoto писал(а):Все это должно приблизить триумф. :-)
я слышу сарказм или мне кажется?
Да.

Bormoto
Advanced member
Сообщения: 253
Зарегистрирован: 06 июл 2007, 22:20
Откуда: спб

Re: DL160 G5 + VMware ESXi + Xyratex F5412E

Сообщение Bormoto » 21 авг 2009, 18:08

Stranger03 писал(а):
Bormoto писал(а): На Vmware HA или VMotion придется раскошелиться.
Отдельно эти опции уже не продаются.
Спасибо за поправку. XenServer становится еще интереснее.

tushka
member
Сообщения: 34
Зарегистрирован: 20 авг 2009, 17:39
Откуда: SPb

Re: DL160 G5 + VMware ESXi + Xyratex F5412E

Сообщение tushka » 21 авг 2009, 18:22

diz писал(а):Нет, работать не будет :)
я почему-то так и думал
diz писал(а):(в СХД Вы же родные для СХД будете покупать?). Если же будете докупать туда HP`шные диски тогда смысл того, чтобы взять СХД от HP только увеличивается.
вообще я предполагал в серваки покупать не НР'шные диски, а Seagate или WD
их же я думаю без проблем получится вставить в полку Xyratex

Ответить

Вернуться в «Кластеры, Аппаратная часть»

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 9 гостей