Выбор оборудования

Технологии постороения кластеров (вычислительных и отказоустойчивых), настройка терминал серверов,
SAN , NAS, FibreChannel, Infiniband

Модераторы: Trinity admin`s, Free-lance moderator`s

Ответить
butenin
Junior member
Сообщения: 7
Зарегистрирован: 20 май 2006, 15:56

Выбор оборудования

Сообщение butenin » 22 май 2006, 12:30

Здравствуйте!
Возникла задача организовать отказоустойчивое решение для публичного хостинга. Планируется использовать до 6-и серверов для этой цели. Однако, необходимо, чтобы все эти серверы имели параллельный и доступ к некоему файловому хранилищу объемом от 4Тб. Также, хочется, чтобы была приличная скорость и невысокая нагрузка на серверах. Какие решения для организации такого хранилища бывают?
P.S. В финансовом плане ограничений нет.
Последний раз редактировалось butenin 22 май 2006, 12:37, всего редактировалось 1 раз.

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Сообщение gs » 22 май 2006, 12:34

В каком смысле ограничений нет? Речь о десятках или о сотнях тысяч? Разница существенная.

В принципе это решение достаточно простое - файберная дисковая система нужного класса и пачка серверов. На серверах IP лоад балансинг. На массиве файловая система распределенного доступа - халявная GFS или, лучше, IBM GPFS. Если речь просто о раздаче ftp или http, то больше ничего не надо. Если надо кластеризовать софт типа СУБД или вэб серверов, то надо просто в эту сторону подумать.

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Сообщение gs » 22 май 2006, 12:37

Как вариант - IBM DS4700 (с GPFS) + BladeCenter. Сервера кстати можно VMware кластеризовать.

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Сообщение gs » 22 май 2006, 12:38

Кстати у нас будет семинар 24 мая - приходите, там будут похожие темы.
http://www.trinity.spb.ru/news/303.htm

butenin
Junior member
Сообщения: 7
Зарегистрирован: 20 май 2006, 15:56

Сообщение butenin » 22 май 2006, 12:52

Бюджет - до 50к долларов. Может быть, и до сотни, но пока точно не известно.
Я посмотрел на IBM DS4700 (http://www-03.ibm.com/servers/storage/d ... 00/ds4700/). Вроде бы туда можно 16 дисков всего запихнуть?
А как насчет объединения нескольких таких агрегатов? Т.е. можно ли при необходимости докупить еще и объединить их?
И еще - можно поподробнее про BladeCenter? Что это даст?

И в качестве уточнения - на серверах будет крутиться CentOS4 (RHEL4-based).
Последний раз редактировалось butenin 22 май 2006, 12:59, всего редактировалось 1 раз.

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Сообщение gs » 22 май 2006, 12:59

Сорри, но 50к - это очень даже не беспредельный бюджет. Блэйд в таком раскладе отпадает по цене. Как и дисковые IBM или Hitachi - просто денег не хватит.

Посмотрите на дисковую Xyratex 5402 - она масштабируется до 60 дисков SAS или SATA. Повесьте на нее пачку серверов через свич (или через два - для надежности).

И подробнее про софт - пока непонятно.

Серверов мы можем предложить море - на выбор.

butenin
Junior member
Сообщения: 7
Зарегистрирован: 20 май 2006, 15:56

Сообщение butenin » 22 май 2006, 13:25

Про ПО: будет ипользоваться обычный инструмент хостера - apache, ну и, может быть, nginx для отдачи статики. Прочую обвязку реализует самописный движок.
Отдавать нужно много, быстро и непрерывно - вот собственно и требования.

Не совсем понятно про файловую систему. В случае IBM DS4700 используется фирменная GPFS, а в случае Xyratex?

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Сообщение gs » 22 май 2006, 13:27

GPFS теоретически будет работать, но мы не проверяли. RedHat GFS работать будет, но без напильника не обойдется.

butenin
Junior member
Сообщения: 7
Зарегистрирован: 20 май 2006, 15:56

Сообщение butenin » 22 май 2006, 13:52

А каков порядок цен на Xyratex 5402?

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Сообщение gs » 22 май 2006, 14:06

Головной блок с двумя контроллерами стоит навскидку 11-12тонн. Ящик расширения - 4-5тонн. Винты - много их там разных. Например 50ГБ сата - порядка 550долл, 300ГБ сас - 1100-1200долл.

da
Power member
Сообщения: 42
Зарегистрирован: 22 мар 2004, 16:18

Сообщение da » 24 май 2006, 12:18

>Возникла задача организовать отказоустойчивое решение для
>публичного хостинга. Планируется использовать до 6-и серверов для
>этой цели. Однако, необходимо, чтобы все эти серверы имели
>параллельный и доступ к некоему файловому хранилищу объемом от
>4Тб

рекомендую использовать системы NAS (NFS). для хостинга это самое подходящее решение.

Аватара пользователя
exLH
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 5061
Зарегистрирован: 11 фев 2004, 15:49
Откуда: Москва
Контактная информация:

Сообщение exLH » 26 май 2006, 11:21

da
И насколько эффективно работает NFS при расшаривании огромного числа очень мальеньких файлов (как раз случай для хостинга)? Я, так примерно раз в неделю, слышу громкие плачи на эту тему. И после плача обычно начинают задумываться про iSCSI+CFS или  FC+CFS.

Аватара пользователя
CrazyFrog
Advanced member
Сообщения: 210
Зарегистрирован: 16 авг 2005, 23:09
Откуда: Мурманск

Сообщение CrazyFrog » 29 май 2006, 14:49

exLH писал(а):da
И насколько эффективно работает NFS при расшаривании огромного числа очень мальеньких файлов (как раз случай для хостинга)? Я, так примерно раз в неделю, слышу громкие плачи на эту тему. И после плача обычно начинают задумываться про iSCSI+CFS или  FC+CFS.
на NetApp работает хорошо.

С кластерными файлухами связыватся можно, когда у тебя всё примерно одной версии,  редко меняется и нет зоопарка. Владельцы же хостингов вечно хотят какую-нибудь ерунду юзать типа xBSD и всяких прочих Gentoo.

Ответить

Вернуться в «Кластеры, Аппаратная часть»

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 12 гостей