Отказоустойчивые СХД для проекта кластера виртуализации

Технологии постороения кластеров (вычислительных и отказоустойчивых), настройка терминал серверов,
SAN , NAS, FibreChannel, Infiniband

Модераторы: Trinity admin`s, Free-lance moderator`s

Alex_Saf
Advanced member
Сообщения: 68
Зарегистрирован: 19 апр 2005, 11:46
Откуда: Семилуки

Отказоустойчивые СХД для проекта кластера виртуализации

Сообщение Alex_Saf » 04 июн 2014, 02:29

Доброго времени суток!

Есть задача сделать кластер из двух серверов (линукс) под систему виртуализации KVM с 2-мя СХД. Фактически необходимо, что то типа "зеркала" для СХД. Как я понял с СХД такая возможность называется синхронизацией (синхр или асинхр) и работает на неких "фирменных" технологиях.
Позвольте пару вопросов:
1) Насколько адекватна такая синхронизация? Асинхронный режим наверно отпадает сразу. Синхронный режим будет ли аналогом рейда1? Есть какие-то встроенные механизмы контроля.
2) Не лучше ли использовать какие-нибудь кластерные фс в таком случае (мне ближе glusterfs)
3) У меня есть опыт клатеростроения на 2 ноды+ 1 СХД. Но 2 СХД ставят меня в тупик. Как технически строится система с 2-мя СХД, чтобы ноды начали автоматом (или как?) использовать вторую СХД после сбоя первой?
4) Стоимость проекта оценивается в 800-900 т.р вместе с серверами. В качестве серверов видимо будет супермикро 6027R-N3RFT+. Но вот что использовать как СХД и как вязать? Что лучше использовать FC или iSCSI, учитывая, что на сервере вроде есть 10Г. Какие в таком случае использовать коммутаторы? Коммутаторов тоже нужна пара?

Прошу помочь.
Заранее благодарю.

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Re: Отказоустойчивые СХД для проекта кластера виртуализации

Сообщение gs » 04 июн 2014, 11:51

Что мешает зазеркалировать стораджи средствами ОС?

800-900тыс - это стоимость одной приличной СХД начального уровня. Ну разве что на сервера может немного денег остаться.

Alex_Saf
Advanced member
Сообщения: 68
Зарегистрирован: 19 апр 2005, 11:46
Откуда: Семилуки

Re: Отказоустойчивые СХД для проекта кластера виртуализации

Сообщение Alex_Saf » 04 июн 2014, 12:41

Каким образом?
рсюнком? нет, не пойдет

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Re: Отказоустойчивые СХД для проекта кластера виртуализации

Сообщение gs » 04 июн 2014, 13:42

Вы сначала определитесь - есть ли у Вас денег на такие изыски...

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: Отказоустойчивые СХД для проекта кластера виртуализации

Сообщение Stranger03 » 04 июн 2014, 14:09

Alex_Saf писал(а):Каким образом?
рсюнком? нет, не пойдет
Нет, есть опции remote mirror, которые по файберу зеркалируют тома схд друг на друга. Оция не дешовая, для самых лоуенд массивов от 5К долларов.
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

Alex_Saf
Advanced member
Сообщения: 68
Зарегистрирован: 19 апр 2005, 11:46
Откуда: Семилуки

Re: Отказоустойчивые СХД для проекта кластера виртуализации

Сообщение Alex_Saf » 04 июн 2014, 14:11

Зачем обсуждать деньги?

Вроде бы обсуждаем техническую проблему. Я описал свои трудности. Нужна методология решения. По возможности несколько вариантов. Под эти варианты и подтянут деньги, если захотят. А если не захотят - значит не будет никакого решения.

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: Отказоустойчивые СХД для проекта кластера виртуализации

Сообщение Stranger03 » 04 июн 2014, 14:13

Alex_Saf писал(а):4) Стоимость проекта оценивается в 800-900 т.р вместе с серверами.
Это очень небольшой бюджет. 300-350 тысяч на сервера. На две СХД остается 500 с небольшим. За эти деньги можно купить что-то вроде Сторвайза В3700 с 4-5 дисками. Ни о каких опциях репликации думать уже не получается.
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Re: Отказоустойчивые СХД для проекта кластера виртуализации

Сообщение gs » 04 июн 2014, 14:18

Знаете, мы можем обсуждать варианты резервирования и за мегабаксы. Но вот оно нам надо? У Вас вполне очевидно нехватка бюджета в разы.
В таком случае разумнее сменить схему обеспечения отказоустойчивости. Не знаю, как быть с КВМ, но для микрософта и вмвари есть очень неплохие варианты, и в бюджет вполне влезет.

Alex_Saf
Advanced member
Сообщения: 68
Зарегистрирован: 19 апр 2005, 11:46
Откуда: Семилуки

Re: Отказоустойчивые СХД для проекта кластера виртуализации

Сообщение Alex_Saf » 04 июн 2014, 14:20

Stranger03 писал(а):
Alex_Saf писал(а):Каким образом?
рсюнком? нет, не пойдет
Нет, есть опции remote mirror, которые по файберу зеркалируют тома схд друг на друга. Оция не дешовая, для самых лоуенд массивов от 5К долларов.
Про рсюнк писалось в ответ на средства ОС.
Как я понимаю remote mirror это не средства ос нод, а средства самого схд. Это и будет что-то типа райд1?
Какие СХД это поддерживают?

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: Отказоустойчивые СХД для проекта кластера виртуализации

Сообщение Stranger03 » 04 июн 2014, 14:22

Alex_Saf писал(а):Я описал свои трудности. Нужна методология решения. По возможности несколько вариантов. Под эти варианты и подтянут деньги, если захотят. А если не захотят - значит не будет никакого решения.
Два варианта:
1. реплицировать средствами ОСи. Делается легко на уровне мирроринга томов. Платить за это не надо.
2. средствами СХД. Минимум по 5К $ на каждую СХД
Ну и если вы хотите получить более ли менее нормальную СХД, то на нее на одну штуку надо закладывать от 500К рублей, от 15К $
П.С. поправьте город в профиле.
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: Отказоустойчивые СХД для проекта кластера виртуализации

Сообщение Stranger03 » 04 июн 2014, 14:24

Alex_Saf писал(а):Как я понимаю remote mirror это не средства ос нод, а средства самого схд. Это и будет что-то типа райд1?
Какие СХД это поддерживают?
Да, практически все брендовые. Делл, ЕМС, ИБМ, ХП, Хитачи, Фуджитсу.
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

Alex_Saf
Advanced member
Сообщения: 68
Зарегистрирован: 19 апр 2005, 11:46
Откуда: Семилуки

Re: Отказоустойчивые СХД для проекта кластера виртуализации

Сообщение Alex_Saf » 04 июн 2014, 15:27

Stranger03 писал(а):
Alex_Saf писал(а):Как я понимаю remote mirror это не средства ос нод, а средства самого схд. Это и будет что-то типа райд1?
Какие СХД это поддерживают?
Да, практически все брендовые. Делл, ЕМС, ИБМ, ХП, Хитачи, Фуджитсу.
хп мса2040 подойдет?
Все же вопрос как эти две схд будут коммутироваться с серверами? Между СХД лежит фибра и они чегой-т там зеркалят. Скажем на каждом СХД 2 контроллера. Первое СХД связано с обоими серверами. На каждом из серверов стоят два HBA или один двухголовый. Юзается мультипатч. Тут ясно. А второе СХД как приторочить? В вышеназванной схеме первое СХД склеило ласты, как кластер подцепит второе СХД?

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: Отказоустойчивые СХД для проекта кластера виртуализации

Сообщение Stranger03 » 04 июн 2014, 16:12

Alex_Saf писал(а):Про рсюнк писалось в ответ на средства ОС.
Здесь тоже несколько вариантов.
1. через репликацию томов по сети
2. миррор томов по файберу средствами вольюм менеджмент.
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: Отказоустойчивые СХД для проекта кластера виртуализации

Сообщение Stranger03 » 04 июн 2014, 16:13

Alex_Saf писал(а):хп мса2040 подойдет?
Все же вопрос как эти две схд будут коммутироваться с серверами? Между СХД лежит фибра и они чегой-т там зеркалят. Скажем на каждом СХД 2 контроллера. Первое СХД связано с обоими серверами. На каждом из серверов стоят два HBA или один двухголовый. Юзается мультипатч. Тут ясно. А второе СХД как приторочить? В вышеназванной схеме первое СХД склеило ласты, как кластер подцепит второе СХД?
Для прямого подключения ремоте миррор бесполезен. Нужен файберный коммутатор. Это еще +10К. В этом случае обычное зеркалирование на уровне ОС.
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

Alex_Saf
Advanced member
Сообщения: 68
Зарегистрирован: 19 апр 2005, 11:46
Откуда: Семилуки

Re: Отказоустойчивые СХД для проекта кластера виртуализации

Сообщение Alex_Saf » 04 июн 2014, 17:31

А если использовать иСкази? Не дешевле/эфективней?

И что вы подразумеваете под "зеркалированием на уровне ОС"? В частности в контексте линукса?
Вы имеете ввиду md ?

Ответить

Вернуться в «Кластеры, Аппаратная часть»

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 14 гостей