Выбор решения для организации сетевого raid5 для кластера
Модераторы: Trinity admin`s, Free-lance moderator`s
Выбор решения для организации сетевого raid5 для кластера
Добрый день!
есть потребность организовать дешёвую, но мало-мальски надёжную файловую помойку (CIFS).
Аппаратная часть:
бэкэнд - 4 сервера, каждый по 1 Тб в raid5 на борту (предназначение - экспортирование дисковой подсистемы фронтэнду)
фронтэнд - 2 сервера (предназначены для балансировки нагрузки и отказоуст)
Защищаемся от:
1) выхода из строя hdd (здесь в качестве защиты - raid5 на бэкэндах)
2) выхода из строя одного сервера бэкэнда
3) выхода из строя одного из серверов фронтэнда
Как я вижу это:
Каждый из 4х серверов бэкэнда отдаёт свой 1Тб по протоколу iscsi каждому из 2х серверов фронтэнда.
Далее - на фронтэндах эти 4 диска объединяются в подобие сетевого raid5 и поверх них создаётся кластерная файловая система.
Далее поднимается LVS(?) или samba ctdb(?) для предоставления параллельного доступа через оба сервера фронтэнда к дисковой ёмкости.
Программная часть:
в качестве ОС везде используется CentOS 5.5
диски с серверов бэкэнда экспортируются tgtd по протоколу iscsi.
С помощью iscsi-initiator эти диски подхватываются на фронтэнде.
Вот далее затыка. Потому что, если объединить эти диски с помощью mdadm в raid5, то это получиться сделать только на одном из серверов фронтэнда, потому что на втором mdadm ругнётся, что диски используются. Следовательно вопрос - что уважаемые доны посоветуют использовать для организации сетевого raid5, который позволит работать в кластере?
Выше пока не поднимаюсь, поскольку от решения этого вопроса наверное будет зависеть и выбор дальнейших решений.
есть потребность организовать дешёвую, но мало-мальски надёжную файловую помойку (CIFS).
Аппаратная часть:
бэкэнд - 4 сервера, каждый по 1 Тб в raid5 на борту (предназначение - экспортирование дисковой подсистемы фронтэнду)
фронтэнд - 2 сервера (предназначены для балансировки нагрузки и отказоуст)
Защищаемся от:
1) выхода из строя hdd (здесь в качестве защиты - raid5 на бэкэндах)
2) выхода из строя одного сервера бэкэнда
3) выхода из строя одного из серверов фронтэнда
Как я вижу это:
Каждый из 4х серверов бэкэнда отдаёт свой 1Тб по протоколу iscsi каждому из 2х серверов фронтэнда.
Далее - на фронтэндах эти 4 диска объединяются в подобие сетевого raid5 и поверх них создаётся кластерная файловая система.
Далее поднимается LVS(?) или samba ctdb(?) для предоставления параллельного доступа через оба сервера фронтэнда к дисковой ёмкости.
Программная часть:
в качестве ОС везде используется CentOS 5.5
диски с серверов бэкэнда экспортируются tgtd по протоколу iscsi.
С помощью iscsi-initiator эти диски подхватываются на фронтэнде.
Вот далее затыка. Потому что, если объединить эти диски с помощью mdadm в raid5, то это получиться сделать только на одном из серверов фронтэнда, потому что на втором mdadm ругнётся, что диски используются. Следовательно вопрос - что уважаемые доны посоветуют использовать для организации сетевого raid5, который позволит работать в кластере?
Выше пока не поднимаюсь, поскольку от решения этого вопроса наверное будет зависеть и выбор дальнейших решений.
- exLH
- Сотрудник Тринити
- Сообщения: 5061
- Зарегистрирован: 11 фев 2004, 15:49
- Откуда: Москва
- Контактная информация:
Re: Выбор решения для организации сетевого raid5 для кластера
weih
Хотите конкурировать с LeftHand? Конечно похвально, но у HP явно больше ресурсов
Хотите конкурировать с LeftHand? Конечно похвально, но у HP явно больше ресурсов
Почтовый адрес для связи: a.ivanov@trinitygroup.ru | ICQ: 112586598
- Stranger03
- Сотрудник Тринити
- Сообщения: 12979
- Зарегистрирован: 14 ноя 2003, 16:25
- Откуда: СПб, Екатеринбург
- Контактная информация:
Re: Выбор решения для организации сетевого raid5 для кластера
А я подумал про ipstor,
Re: Выбор решения для организации сетевого raid5 для кластера
To weih:
Прочтите на досуге "Орд-Хьюм А. Вечное движение. История одной навязчивой идеи. М.: Знание, 1980". В интернет, кажется, есть в свободном доступе.
Прочтите на досуге "Орд-Хьюм А. Вечное движение. История одной навязчивой идеи. М.: Знание, 1980". В интернет, кажется, есть в свободном доступе.
- exLH
- Сотрудник Тринити
- Сообщения: 5061
- Зарегистрирован: 11 фев 2004, 15:49
- Откуда: Москва
- Контактная информация:
Re: Выбор решения для организации сетевого raid5 для кластера
Вообще рядом не лежалStranger03 писал(а):А я подумал про ipstor,
Почтовый адрес для связи: a.ivanov@trinitygroup.ru | ICQ: 112586598
- Stranger03
- Сотрудник Тринити
- Сообщения: 12979
- Зарегистрирован: 14 ноя 2003, 16:25
- Откуда: СПб, Екатеринбург
- Контактная информация:
Re: Выбор решения для организации сетевого raid5 для кластера
Ну может с лефтхандом рядом и не полежал, но ведь репликацию томов то по ip можно сделать. Разве не?exLH писал(а):Вообще рядом не лежал
Re: Выбор решения для организации сетевого raid5 для кластера
Я зарегистрировался на этом форуме уже сравнительно давно - в декабре 2004. Сюда я пришёл потому, что мне интересны были темы поднимаемые на этом форуме + радовала оперативность и компетентность отвечающих. Я спрашивал и получал грамотные и своевременные замечания и советы.
Но со временем всё поменялось. Оперативность ответов осталась на уровне, но вот содержательность постов стала удручать.
Я перестал спрашивать на форуме. Читать ветки форумов стал меньше и с ГОРАЗДО меньшим удовольствие и причиной этому ваше хамское отношение, яркий пример (из последнего) - http://3nity.ru/viewtopic.php?f=11&t=14718
Правильно человек вас назвал - ТРЕПАЧИ.
И кстати, то про что я спрашивал - я сумел реализовать. Связка DRBL+RHCS+multipathd+mdadm+SAMBA работает и защищает от выхода из строя одного винчестера в каждом хранилище, одной ноды бэкэнда, одной ноды фронтэнда. Всё работает с мультипассингом (балансировка и отказоустойчивость). Сетевой raid5 тоже работает. Дешёво, сердито, надёжно. На съэкономленные компанией деньги получаем премию и едем отдыхать.
Так что торгуйте lefthand, читайте книжки про вечные двигатели, спорьте подходит ли ipstor для чего-то-там. Но за советом к вам я больше не приду и никому не посоветую.
Но со временем всё поменялось. Оперативность ответов осталась на уровне, но вот содержательность постов стала удручать.
Я перестал спрашивать на форуме. Читать ветки форумов стал меньше и с ГОРАЗДО меньшим удовольствие и причиной этому ваше хамское отношение, яркий пример (из последнего) - http://3nity.ru/viewtopic.php?f=11&t=14718
Правильно человек вас назвал - ТРЕПАЧИ.
И кстати, то про что я спрашивал - я сумел реализовать. Связка DRBL+RHCS+multipathd+mdadm+SAMBA работает и защищает от выхода из строя одного винчестера в каждом хранилище, одной ноды бэкэнда, одной ноды фронтэнда. Всё работает с мультипассингом (балансировка и отказоустойчивость). Сетевой raid5 тоже работает. Дешёво, сердито, надёжно. На съэкономленные компанией деньги получаем премию и едем отдыхать.
Так что торгуйте lefthand, читайте книжки про вечные двигатели, спорьте подходит ли ipstor для чего-то-там. Но за советом к вам я больше не приду и никому не посоветую.
Кто сейчас на конференции
Сейчас этот форум просматривают: нет зарегистрированных пользователей и 13 гостей