Конфигурация RAID для записи непрерывного потока 3.6 GByte/s

Конфигурирование, планирование RAID систем, возможности, технологии, теория. Qlogic, LSI Logic, Adaptec ...

Модераторы: Trinity admin`s, Free-lance moderator`s

Ответить
RobFPGA
Junior member
Сообщения: 2
Зарегистрирован: 25 дек 2010, 00:40
Откуда: Харьков

Конфигурация RAID для записи непрерывного потока 3.6 GByte/s

Сообщение RobFPGA » 25 дек 2010, 01:11

Приветствую Всех!

Вот встала передо мной такая задачка.
Требуется определится с конфигурацией RAID для записи непрерывного потока в 3.2 Gbyte/s в течении не менее 10 мин. Задачка усложняется тем что железка которая генерирует такой поток это "своя" система об работки сигналов построенная на базе FPGA. В качестве интерфейса передачи данных рассматривается 3 варианта
20 портов 2Gb FC - (почти готовое решение но уж очень много отнимает ресурсов)
12 портов 4Gb FC - (пока под вопросом возможность реализации )
4 порта 10GEthernet - (наиболее желаемое и понятное в реализации)

Опыта работа с оборудованием RAID у меня нет поэтому хочу понят
а) приблизительные варианты конфигураций для этого, поскольку в рекламных проспектах в основном не указывается возможная реальная скорость чтения/записи, было бы интересно получить информации о реальных цифрах реальных систем.
б) какой необходимые soft для этого потребуется мне разрабатывать чтобы стыковать железку со стандартным RAID (какие протоколы реализовывать, драйвера и.т.д.)

Буду признателен за любую информацию о данной проблеме.

С уважением! RobFPGA.

Аватара пользователя
exLH
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 5061
Зарегистрирован: 11 фев 2004, 15:49
Откуда: Москва
Контактная информация:

Re: Конфигурация RAID для записи непрерывного потока 3.6 GByte/s

Сообщение exLH » 25 дек 2010, 11:18

Почтовый адрес для связи: a.ivanov@trinitygroup.ru | ICQ: 112586598

RobFPGA
Junior member
Сообщения: 2
Зарегистрирован: 25 дек 2010, 00:40
Откуда: Харьков

Re: Конфигурация RAID для записи непрерывного потока 3.6 GByte/s

Сообщение RobFPGA » 25 дек 2010, 17:47

Приветствую!
exLH писал(а):http://www.ddn.com/9900
Это решение конечно крутое но очень уж монстро-образное как по объему - так и по цене наверное.
Мне бы что-нибудь по проще (как пример - что то типа такого iStor iS325-10 15 bay SATA II to 10Gb iSCSI RAID)
поставить таких штуки 4 на каждый канал 10Gb Ethernet.
Только вот хочется конкретной информации - сколько реально получится скорость записи непрерывного потока
в такой (или похожий) RAID с 16 винтами SATA 7200 с одного канала 10Gb iSCSI ?
А если взять блок на 24-36 винтов SATS и с двумя контроллерами и портами 10Gb ? Будет ли при этом скорость записи 2GByte/s ?
Хочется услышать цифры полученные в практике для того что бы понять величину корректирующего коэффициента для сравнения в проспектах :)

Удачи! Rob.

sivanov
Advanced member
Сообщения: 127
Зарегистрирован: 25 апр 2008, 11:20
Откуда: Свердлоская обл.

Re: Конфигурация RAID для записи непрерывного потока 3.6 GByte/s

Сообщение sivanov » 25 дек 2010, 22:42

SSD можно поставить.
Те, которые на SF-1200, SF-1500 дают в районе 260MB/sec чтение/запись, на SF-2000 (6Gb/s SATA) 500MB/sec. Цены дешевые.
Promise выпускает FC-8 полки для 6gb/s SAS/SATA

sivanov
Advanced member
Сообщения: 127
Зарегистрирован: 25 апр 2008, 11:20
Откуда: Свердлоская обл.

Re: Конфигурация RAID для записи непрерывного потока 3.6 GByte/s

Сообщение sivanov » 26 дек 2010, 17:12

Можете попробовать PC сервер собрать на SuperMicro X8DTH-iF, пропускной способности QPI 12.8GB/sec в одну сторону должно хватить.
7 PCI-E 2.0x8 слота. Скачайте мануал, посмотрите диаграмму. Если сомневаетесь в пропускной способности, можно взять AMD: HyperTransport шустрее. C похожей расширяемостью Dell PowerEdge R815, есть еще матаринка supermicro H8DAI+-F: 4xPCI-E 2.0 x16.
Контроллеры:
тут выбор тоже не богат: 10G Ethernet - Intel
а при выборе SATA/SAS HBA я бы поостерегся брать интеллектуальные контроллеры, память в них не лучше чем DDR2 800, пропускная способность 6400MB/sec а кроме того чтобы читать, надо считать контрольные суммы и писать, процы дохленькие на карточках. Лучше взять типа ATTO Express SAS H60F: "19.2GB/s throughput in full duplex-mode"
есть еще ограничение 802.3ad: вы можете саггрегировать хоть 10 каналов, но реально по общему на канал мак адресу у вас будет задействован только 1 порт на коммутаторе, так работает балансировка на коммутаторах. при прямом подключении, вероятно все будет работать как вам надо. Несколько каналов неплохо используется, когда есть Multipath софт и балансировка нагрузки идет на уровне FC/iSCSI.
если будете собирать на супермикре, уложитесь миимум в 12000 с 12ю SSD типа OCZ Vertex 2 240GB, это вам как раз на 10 минут :)
EDIT: конечно, Vertex 2 это SATA 2 SSD, для требуемой скорости вам их больше надо будет
IIRC был еще корпус на 36 3.5 SAS от supermicro. Можно Seagate Cheetah 15k.7 поставить. У них минимальная скорость записи 122MB/s. Аж на целых 27 минут записи :O

hitower
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 357
Зарегистрирован: 23 дек 2007, 15:35
Откуда: Москва
Контактная информация:

Re: Конфигурация RAID для записи непрерывного потока 3.6 GByte/s

Сообщение hitower » 27 дек 2010, 10:36

RobFPGA писал(а): Мне бы что-нибудь по проще (как пример - что то типа такого iStor iS325-10 15 bay SATA II to 10Gb iSCSI RAID)
поставить таких штуки 4 на каждый канал 10Gb Ethernet.
Только вот хочется конкретной информации - сколько реально получится скорость записи непрерывного потока
в такой (или похожий) RAID с 16 винтами SATA 7200 с одного канала 10Gb iSCSI ?
А если взять блок на 24-36 винтов SATS и с двумя контроллерами и портами 10Gb ? Будет ли при этом скорость записи 2GByte/s ?
Хочется услышать цифры полученные в практике для того что бы понять величину корректирующего коэффициента для сравнения в проспектах :)
Набивайте машины 8-портовыми контроллерами с SAS 15k или SSD дисками, например 1 корпус Supermicro SCE-836-TQ, 2 8-портовых контроллера (Adaptec 5805, LSI 9260-8i), и нужна оптимизация со стороны софта - чтобы блоки в памяти лишний раз не копировались.
Реально на записи с одного контроллера до 0.8-1ГБ/с можно выжать спокойно.

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: Конфигурация RAID для записи непрерывного потока 3.6 GByte/s

Сообщение Stranger03 » 27 дек 2010, 14:47

"RobFPGA"
Заполните пожалуйста город в профиле согласно правилам: http://3nity.ru/viewtopic.php?f=8&t=11458
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

Ответить

Вернуться в «Массивы - RAID технологии.»

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 19 гостей