FF-R2021 & F16F-R2J2 JBOD

Технологии постороения кластеров (вычислительных и отказоустойчивых), настройка терминал серверов,
SAN , NAS, FibreChannel, Infiniband

Модераторы: Trinity admin`s, Free-lance moderator`s

Ответить
Аватара пользователя
art
free-lance moderator
Сообщения: 653
Зарегистрирован: 15 май 2003, 11:25
Откуда: SPb

FF-R2021 & F16F-R2J2 JBOD

Сообщение art » 23 окт 2006, 12:06

прошу совета по конфигурации массива.
Оттестированли 2-х головый контроллер R2021 и FC JBOD с 16-ю дисками. Хотим окончательно ставить в production.

Вопрос 1: делать ли RAID5 на 15-ти дисках + 1 HS, или лучше сделать RAID10, RAID50 из соображений безопасности, скорости rebuild'а и производительности?

1) объем на этом JBOD для нас вполне избыточен, и мы за него не держимся (см. п.4), запас производительности более важен.
2) производительности на RAID5 сейчас хватает с запасом, проверили на реальной нагрузке. Даст ли что то RAID10, или мощности контроллера и так достаточно?
3) нагрузка 75-80% чтение, random.
4) если потребуется выделить отдельный LD для задач с линейной нагрузкой, готовы (и уже планируем) купить FC-SATA JBOD

Вопрос 2:
верно ли предположение, что насыщение производительности конроллеров нам не грозит при  числе полок 2-3 на каждый контроллер.

Вопрос 3:
есть ли необходимость включать SMART ? (по умолчанию выключено)

Аватара пользователя
a_shats
Advanced member
Сообщения: 5010
Зарегистрирован: 27 авг 2002, 10:55
Откуда: Москва
Контактная информация:

Сообщение a_shats » 23 окт 2006, 12:12

1. При указанной Вами нагрузке имеет смысл обойтись RAID5.
2. Ваше предположение верно, насыщение должно быть как минимум в районе 5-6 полок 15К.
3. Нет, гораздо лучше - время от времени верифицировать массив.

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Сообщение gs » 23 окт 2006, 12:52

Ну почему? Рэйд50 пошустрее таки ребилдится. Хотя на ФЦ винтах это не так важно.

Аватара пользователя
art
free-lance moderator
Сообщения: 653
Зарегистрирован: 15 май 2003, 11:25
Откуда: SPb

Сообщение art » 23 окт 2006, 14:02

спасибо, понял.
Сейчас не очень активный день,  больше 200K IOPS и очереди более 1.8 (max) не видел.
Поживем еще немного и, видимо, останемся на RAID5.

Кроме того, на raid 10 и 50, мне кажется, нельзя использовать нечетное число дисков. Так только mylex умеет (0+1) ?
Последний раз редактировалось art 23 окт 2006, 14:09, всего редактировалось 1 раз.

Аватара пользователя
art
free-lance moderator
Сообщения: 653
Зарегистрирован: 15 май 2003, 11:25
Откуда: SPb

Сообщение art » 23 окт 2006, 14:06

gs писал(а):Ну почему? Рэйд50 пошустрее таки ребилдится. Хотя на ФЦ винтах это не так важно.
Это точно: на ненагруженном контроллере у меня rebuild прошел за 45-50 минут. Это на 15-ти то дисках!
Я не ожидал..

Аватара пользователя
a_shats
Advanced member
Сообщения: 5010
Зарегистрирован: 27 авг 2002, 10:55
Откуда: Москва
Контактная информация:

Сообщение a_shats » 23 окт 2006, 14:10

Сейчас не очень активный день,  больше 200K IOPS
СКОЛЬКО ??? С 15 винтов ???? Фантастика. Один файберный ствол 2 Гбпс дает порядка 25К ИОпс - Вы все 8 прицепили, причем каким-то хитрым драйвером с суровой балансировкой нагрузки ? С винтов столько даже в принципе не выжать.

Аватара пользователя
art
free-lance moderator
Сообщения: 653
Зарегистрирован: 15 май 2003, 11:25
Откуда: SPb

Сообщение art » 23 окт 2006, 14:14

a_shats писал(а):
Сейчас не очень активный день,  больше 200K IOPS
СКОЛЬКО ??? С 15 винтов ???? Фантастика. Один файберный ствол 2 Гбпс дает порядка 25К ИОпс - Вы все 8 прицепили, причем каким-то хитрым драйвером с суровой балансировкой нагрузки ? С винтов столько даже в принципе не выжать.
Прощенья просим -)
Пошел учиться читать запятые в perfmon
прошу читать "2000 IOPS"

Аватара пользователя
a_shats
Advanced member
Сообщения: 5010
Зарегистрирован: 27 авг 2002, 10:55
Откуда: Москва
Контактная информация:

Сообщение a_shats » 23 окт 2006, 15:18

Вот это похоже на правду - а то бы мя инфаркт хватил :)

Аватара пользователя
art
free-lance moderator
Сообщения: 653
Зарегистрирован: 15 май 2003, 11:25
Откуда: SPb

Сообщение art » 23 окт 2006, 15:26

a_shats писал(а):Вот это похоже на правду - а то бы мя инфаркт хватил :)
впервые такой аппарат в руках, вот цифры то перед глазами и побежали-побежали...

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Сообщение gs » 23 окт 2006, 16:00

Вы возьмите Хитачи АМС1000 с парой сотен блинов - вот там-то цифирки забегают-забегают :)

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Сообщение gs » 23 окт 2006, 16:01

Кстати 200иопс для такой банки может быть пределом - так что на очередь таки посмотрите подольше...

Аватара пользователя
art
free-lance moderator
Сообщения: 653
Зарегистрирован: 15 май 2003, 11:25
Откуда: SPb

Сообщение art » 23 окт 2006, 16:22

gs писал(а):Кстати 200иопс для такой банки может быть пределом - так что на очередь таки посмотрите подольше...
Максимальная за полдня - 1.8 - это более чем хорошо. А так - вообще по земле стелется - без микроскопа не увидеть.

Если припрет, то всякие 1С задачи можно на отдельную полку выделить. IOPS-ов если и не  добавит, но отклик от независимых блинов - вполне укоротит.

Да и cache-hits для отдельного массива поднимется. У нас там, где IOPS's, там и таблицы маленькие.
gs писал(а):Вы возьмите Хитачи АМС1000 с парой сотен блинов - вот там-то цифирки забегают-забегают :)
Погодим пока.
А то  не a_shats'у, а мне валидол понадобится -)

Ответить

Вернуться в «Кластеры, Аппаратная часть»

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 15 гостей