СХД под требования 70к IOPS на рандомном чтении

[Bush]

добрый день!

столкнулись в проекте с творчеством шибко умного консультанта сумевшего прописать требования к СХД вот в таком виде:

dual controler
FC connection 8Gps
24 bays for HDD
4K sequential read IOPS≥70000
Support RAID 10,5
dual redundant PS
256Gb SSD high-speed caching function
total capacity ≥30TB
on SAS HDD 15k rpm, usingRAID10

для задач которые будут решаться 70к IOPS не нужны даже близко, хватает LSI + 8 SATA дисков по 6Тб. Возможно какие то еще задачи планируется решать, за наш счет Боюсь что деятели могут и проверить эти 70к IOPS на полном объеме

я правильно понимаю, что если строить это на SAS, то это где то 500-700 дисков надо? Что мне кажется нереальным.
и единственный вариант это SSD? странно было бы городить полку SSD и к ней "быстрый" кеш на SSD...

[Stranger03]

я правильно понимаю, что если строить это на SAS, то это где то 500-700 дисков надо? Что мне кажется нереальным.

Примерно в районе 280-300 дисков

и единственный вариант это SSD? странно было бы городить полку SSD и к ней "быстрый" кеш на SSD...

Рандомное чтение блоками 4Кб и 70000 иопсов, сейчас пробую смоделировать.

[Stranger03]

Bush
70К иопсов дадут 3-и диска SSD в Раид5 с утилизацией контроллеров порядка 40% на V5030. Так что можно брать модель поменьше.

Код: Выделить всё

Project:                            Project1

Model:                              Model1

Disk Subsystem name:                DSS1
Type:                               IBM V5030 (7.6)
Virtualized storage:                No
Cache size:                         32768 Mbyte
Easy Tier:                          Off
Interfaces:                         8 Fibre 16 Gb, 8 Gb Server Interface Adapters
                                    
Total Capacity:                     500,0 GB

Remote copy type:                   No Remote Copy Active or Remote Copy Not Supported


Storwize configuration details
Number of node pairs:             1 
Number of internal drives:        3   
Easy Tier:                        off

Advanced Storwize Outputs (rel. 16.3.0):
Total Service Time:                     0,3 ms
Read Service Time:                      0,3 ms
Write Service Time:                     0,2 ms
Channel Queue Time:                     0,0 ms
Processor Utilization for I/O:         40,0 %
Channel Utilization:                    7,8 %
Host Adapter Utilization:               9,2 %
SAS Interface Utilization:              8,6 %
Flash Drive Utilization:               67,5 %
SAS 15K Drive Utilization:              0,0 %
SAS 10K Drive Utilization:              0,0 %
SAS 7.2K Drive Utilization:             0,0 %

Storage pool     Drive type       RAID      Width  #Ranks 
1                400GB SSD        RAID 5        3       1 

Storage pool     Drive type       RAID          I/O  Read   Service times    Chan  Highest
                                               rate  perc Total  Read Write  Q tm  disk util%
1                400GB SSD        RAID 5    70000,0    70  0,30  0,35  0,18  0,00  67,5%

Open Server            I/O  Transfer   Resp  Read Read Read Write Write Chan
                       Rate Size (KB)  Time  Perc Hit  Seq   Hit  Eff   Util
Average               70000     4,0    0,30    70   53    5  100   33    22
Open1                 70000     4,0    0,30    70   53    5  100   33    22

[Bush]

Спасибо!

мы уже работали с V3700, он потянет 70k IOPS?

Подскажи пожалуйста, какие из совместимых SSD оптимальней по критерию $ за гиг? Надо 30Тб полезного места.
С учетом стоимости полки, RAID5 и один hot spare на каждой полке.

[Stranger03]

Надо 30Тб полезного места.

30ТБ на SSD, это будет стоить космических денег, . На любом вендоре, .

[Stranger03]

мы уже работали с V3700, он потянет 70k IOPS?

Один SSD диск вам выдаст требуемые 70К иопсов, пример я приводил. Но на 30ТБ вам понадобится минимум 40 дисков по 800ГБ. Стоить они будут космических денег. V3700 дохнет примерно после 20-ти SSD дисков.

[Bush]

попробую склонить к Easy Tier

4х SSD для горячего (тут имеем 70к IOPS) + HotSpare
18х SAS 15k как основа (тут HDD под требования)
ну и сколько то NL-SAS (для объема)

Рабочая идея? Кеш на SSD можно воткнуть?

[VladimirR]

Добрый день ))
можно посмотреть на вариант с Инфортрендом, забитым SSD дисками,
опция Infirtrend Safe Cashe - использование SSD для кэша чтения,
в качестве дисков можно использовать SATA SSD до 1.6TB объёма, проверил по HCL

[VladimirR]

у v3700 нет кэша второго уровня, Easy Tier под это не подсунуть.
и на брэндовых системах цена получится космическая за счёт SSD.

[Stranger03]

Рабочая идея? Кеш на SSD можно воткнуть?

Кеш на SSD поддерживают только ЕМС и Инфортренд.

На ЕМС, если не забивать весь объем SSD дисками, а скажем только штук 5-ть под кеш, сделать можно. Но получить рандомные иопсы 70К можно будет только тогда, когда все горячие данные влезут в кеш. Ну и ценник само собой будет немаленький. Ну и еще момент, ЕМС в начале мая объявит о смене линеек, 5200, 5400 уж больно староваты уже, .

Вы Вовке (Владимир Романов) позвоните, он крайне грамотный мужик, все расскажет,

[VladimirR]

Дополню по вендорам,
кэш для чтения могут сейчас делать многие: NetApp FAS-series, Fujitsu Enternus DX, Dell Compellent, HDS G-series
и конечно те про которые сказал Геннадий: EMC VNXe и Infortrend.
Наверняка есть и ещё кто-то с кем не работаем )))

[gs]

В первом посте написано: "4K sequential read IOPS≥70000" = 280МБ/c линейного чтения.
Такое выдаст любой контроллер с ССД (тиринг или кэш чтения). Главное - подготовиться к тесту (прогреть первый уровень дисков)

[gs]

Да даже с ХДД выдаст...

[Bush]

заказчик любит HP & IBM

но проект уже наш а бренд не указан. пришлось напугать глубинным Китаем, формально Inspur AS1000G6 подходит как СХД. Сервера и SAN идут паровозом от того же бренда. Пользователь в шоке, т.ч. предстоят конструктивные переговоры... Если снижают требования то меняем бренд на всё железо.

хочу выдать easy tier и за cache и за 70к IOPS для галочки, и на этом сильно сэкономить...

Что думаете про Lenovo Storage S3200? по бумажкам есть "Intelligent real-time tiering in a flash hybrid array" но настолько я понимаю двух уровневый в отличии от трех уровневого в V3700

[VladimirR]

в IBM трёхуровневый тиринг только во втором поколении Storwize (v7000 Gen2 и будет в v5000 Gen2)
основные ограничения: "256Gb SSD high-speed caching function, 4K sequential read IOPS≥70000"
Вам придётся урезать оба этих требования.