Массив 20Тб, хранение изображений.

Технологии постороения кластеров (вычислительных и отказоустойчивых), настройка терминал серверов,
SAN , NAS, FibreChannel, Infiniband

Модераторы: Trinity admin`s, Free-lance moderator`s

alex_mist
Junior member
Сообщения: 11
Зарегистрирован: 27 янв 2005, 22:53

Массив 20Тб, хранение изображений.

Сообщение alex_mist » 10 янв 2008, 10:01

Здравствуйте, требуется сделать массив ~20Тб, скоростные показатели сильно не интересуют, по этому только SATA, предпологается использовать RAID6.
Что посоветуете?
Приобрести хранилище типа Xyratex  Fibre Channel - SATA   4835 или собрать на 3Ware в большом корпусе?
Хотелось бы получить некоторые ценовые расчеты...
П.С. Контакты в профиле.

Аватара пользователя
exLH
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 5061
Зарегистрирован: 11 фев 2004, 15:49
Откуда: Москва
Контактная информация:

Сообщение exLH » 10 янв 2008, 10:22

alex_mist
Здравствуйте, требуется сделать массив ~20Тб
К чему (и как) Вы его планируете подключать? Обрисуйте более подробно задачу.

alex_mist
Junior member
Сообщения: 11
Зарегистрирован: 27 янв 2005, 22:53

Сообщение alex_mist » 10 янв 2008, 10:37

Вообщем это будет хранилище для рендера, места нужно много... Подключено будет по 1Гб сети порядка 30 машин. Можно вопрос более конкретно задать ?
Также люди просят что бы все выглядело как 1 диск (как это лучше реализовать?).

metallic
Advanced member
Сообщения: 127
Зарегистрирован: 08 фев 2006, 18:10
Откуда: Воронеж
Контактная информация:

Сообщение metallic » 10 янв 2008, 10:46

exLH писал(а): К чему (и как) Вы его планируете подключать? Обрисуйте более подробно задачу.
У меня есть некоторые соображения по этому поводу, типа покупается "голова" с двумя контроллерами, к ней цепляются дисковые полки, серваки к голове цепляются через контроллер. Что выбрать из производителей пока не знаем, хитачи, хп или ибм.

Аватара пользователя
exLH
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 5061
Зарегистрирован: 11 фев 2004, 15:49
Откуда: Москва
Контактная информация:

Сообщение exLH » 10 янв 2008, 11:04

Подключено будет по 1Гб сети порядка 30 машин
Они все используют общее дисковое пространство?
В таком случае, целесообразно использовать NAS устройства (например, IBM N3600, либо NAS нашего производства). Какой уровень отказоустойчивости необходимо обеспечить?

metallic
Advanced member
Сообщения: 127
Зарегистрирован: 08 фев 2006, 18:10
Откуда: Воронеж
Контактная информация:

Сообщение metallic » 10 янв 2008, 11:06

да, еще:
на сервере будет ОС linux, файловая система EXT3, рейд должен быть предпочтительно 6-го уровня, т.к. позволяет выпадать из массива 2-м винтам, массив должен быть организован одним разделом, скорость работы массива не критична. Важно чтобы была отказоустойчивость

Аватара пользователя
exLH
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 5061
Зарегистрирован: 11 фев 2004, 15:49
Откуда: Москва
Контактная информация:

Сообщение exLH » 10 янв 2008, 11:24

metallic
на сервере будет ОС linux
На каком из "порядка 30"?

файловая система EXT3
С этого момента поподробнее, в каком конкретно месте данного решения должна быть EXT3 (и почему)?

metallic
Advanced member
Сообщения: 127
Зарегистрирован: 08 фев 2006, 18:10
Откуда: Воронеж
Контактная информация:

Сообщение metallic » 10 янв 2008, 12:05

exLH писал(а):metallic
на сервере будет ОС linux
На каком из "порядка 30"?
сервер один будет к которому СХД будет подключен, затем к серверу уже клиенты будут цепляться
exLH писал(а): файловая система EXT3
С этого момента поподробнее, в каком конкретно месте данного решения должна быть EXT3 (и почему)?
ну на разделе дожна же быть файловая система? почему екс3? потому что она в линуксе используется по умолчанию.

Аватара пользователя
exLH
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 5061
Зарегистрирован: 11 фев 2004, 15:49
Откуда: Москва
Контактная информация:

Сообщение exLH » 10 янв 2008, 12:11

metallic
Вот поэтому я и просил изначально подробно изложить задачу.
А получается то
Подключено будет по 1Гб сети порядка 30 машин и серваки к голове цепляются через контроллер, то сервер один будет к которому СХД будет подключен. А потом окажется, что все как-то иначе будет. Вот и хочется определенности.
Кроме того, если сервер один будет, то как это вяжется с Важно чтобы была отказоустойчивость?

metallic
Advanced member
Сообщения: 127
Зарегистрирован: 08 фев 2006, 18:10
Откуда: Воронеж
Контактная информация:

Сообщение metallic » 10 янв 2008, 12:13

Ладно, чтобы не путаться в технологиях, объясню проще:
нужно хранилище 20Тб одним разделом, нужна отказоустойчивость, скорость не критична, какие еще данные нужны?

Аватара пользователя
exLH
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 5061
Зарегистрирован: 11 фев 2004, 15:49
Откуда: Москва
Контактная информация:

Сообщение exLH » 10 янв 2008, 12:17

metallic
хранилище 20Тб одним разделом
хитачи, хп или ибм
Ни один из указанных производителей.
Только мне, простите, совсем не понятно, откуда требование иметь один раздел? Или в Вашем дистрибутиве Linux нет возможности использовать LVM?

metallic
Advanced member
Сообщения: 127
Зарегистрирован: 08 фев 2006, 18:10
Откуда: Воронеж
Контактная информация:

Сообщение metallic » 10 янв 2008, 12:21

exLH писал(а): Только мне, простите, совсем не понятно, откуда требование иметь один раздел? Или в Вашем дистрибутиве Linux нет возможности использовать LVM?
мне сказали "нам надо чтобы был один раздел и там все лежало", отсюда и требования про один раздел, про LVM пошел курить мануалы, т.к. знаю о нем только поверхностно.

alex_mist
Junior member
Сообщения: 11
Зарегистрирован: 27 янв 2005, 22:53

Сообщение alex_mist » 10 янв 2008, 16:16

Например, нам скорее всего подойдет 2 сервера типа Trinity Server 130, забитые винтами под завязку в RAID5(6). Я так понял что в них можно вставлять 1Тб винчестеры...
Только вот вопрос, насколько  Adaptec лучше/хуже чем 3Ware, просто с 3Ware мы работаем и они нас полностью устраивают.
Я все же жду от вас хоть кокого то предложения.

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Сообщение gs » 10 янв 2008, 16:29

Адаптек более функционален, но, насколько я понимаю, Вам это неактуально. Можем и тривари поставить - контроллеры действительно хорошие.
Попозже Андрей Вам черкнет.

and3008
Заслуженный сетевик
Сообщения: 1109
Зарегистрирован: 03 янв 2004, 23:30
Откуда: Н.Новгород

Сообщение and3008 » 10 янв 2008, 16:29

Так же советую почитать про ограничения ядра на размер блоковых устройств с произвольным доступом (это я про /dev/sda, /dev/hda и т.п.)

А еще хочеться обратить внимание на максимально допустимый размер файла в выбранной файловой системе. Это на тот случай, когда спросят "а почему, собственно файл не записывается?".

Делать массивы более 4-х ТБ на Интеловском 32-х битном железе надо аккуратно. Там много подводных камней.

Ответить

Вернуться в «Кластеры, Аппаратная часть»

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 10 гостей