Платформа Supermico Ultra SuperServer 2028U-TN24R4T+

[Aleks3000]

Добрый день.
Планируется бюджет на закупку серверов, я рассчитал следующую конфигурацию:
Платформа Supermico Ultra SuperServer 2028U-TN24R4T+
Intel® Xeon® Processor E5-2695 v4 (45M Cache, 2.10 GHz) 2шт
Supermicro Certified MEM-DR432L-SL02-LR24 Samsung 32GB DDR4-2400 LP ECC LRDIMM 18шт
Intel DC P3700 400GB, NVMe PCIe 3.0 HET MLC 2.5" 20nm SSD 18шт
Intel DC P3700 800GB, NVMe PCIe 3.0 HET MLC 2.5" 20nm SSD 6шт
Supermicro SATA 128GB SATADOM SSD-DM128-SMCMVN1 SATA3 DOM MLC 2шт

Но, возникает следующий вопрос, каким образом возможно обеспечить отказоустойчивость(RAID1), собрать рэйд массив из P3700 кроме как на софтверном уровне?

[Tert]

Aleks3000
Объединение NVME дисков в массивы пока возможно только средствами файловых систем.

Не проще ли взять обычные SATA SSD и подключить их к стандартному RAID контроллеру? Работать будет точно стабильнее, чем работа NVME дисков через мосты PCI-Express.

Поправьте город в профиле.

[Stranger03]

собрать рэйд массив из P3700 кроме как на софтверном уровне?

PCI E SSD собираются в рейд только на софтовом уровне. По другому никак.

И еще момент, вы каким образом собрались ставить 24-е PCI E карты, если в платформе всего то навсего 3-и слота?

[gs]

Слотов-то там нормально, другое дело что микра грузит эти платформы только в собранном виде.
Это абстрагируясь от вопроса - нахрена нужна такой мощи дисковая...

[Stranger03]

Слотов-то там нормально, другое дело что микра грузит эти платформы только в собранном виде.

Это она?

http://www.supermicro.nl/products/syste ... 24R4T_.cfm

Я насчитал только 3-и. Возможно какой-то рейзер поставить, ну допустим даже если 6-ть в 2-а юнита. И то, карточки Flash PCI-E полнопрофильные, не факт, что они все 6-ть встанут в 2-а юнита. А в запросе аж 24-е. Я конечно понимаю, у ИБМ-а у старшей пСерии есть (или были, надо смотреть) специальные джибоды для PCI карт. Но там ценник улетный. Такая конструкция за лям баксов улетит.

Ну и еще момент, 2-а проца со 100% вероятностью не пережуют столько иопсов, сколько отдадут 24-е карты.

[gs]

Ген, там 2,5" NVMe диски.

[Aleks3000]

Слотов-то там нормально, другое дело что микра грузит эти платформы только в собранном виде.
Это абстрагируясь от вопроса - нахрена нужна такой мощи дисковая...

Сервера рассчитываются под высоконагруженную субд mssql, в кластере alwayson AG.
В данный момент используется 10 SSD intel DC S3700 на каждом сервере, в кластере alwayson AG, производительности недостаточно, на tempdb время отклика достигает 100мс, что неприемлемо.
Относительно tempdb - пара накопителей собраны в RAID1, контроллер adaptec 71605, ресурс-записано более 600террабайт.

[hitower]

Кэш записи на 71605 выключен?
На 3700х кэш включен?
Контроллер можно взять и пошустрее - LSI 9361.
SSD - сделайте им secure erase, и не создавайте массив на весь объем, процентов 25 оставьте свободными, должны заработать быстрее.

Насчет NVMe правильно сказали - RAID только средствами софта. Драйвера от Интел позволяют делать RAID для PCI NVMe, 2.5" дисков под рукой проверить не было, но думаю, все то же самое.

И задержки на таком массиве получаются примерно как на RAID контроллере (~50 мкс на команду записи), так что большого смысла пока в RAID NVMe нет.

[Aleks3000]

Кэш записи на 71605 выключен?
На 3700х кэш включен?
Контроллер можно взять и пошустрее - LSI 9361.
SSD - сделайте им secure erase, и не создавайте массив на весь объем, процентов 25 оставьте свободными, должны заработать быстрее.

Насчет NVMe правильно сказали - RAID только средствами софта. Драйвера от Интел позволяют делать RAID для PCI NVMe, 2.5" дисков под рукой проверить не было, но думаю, все то же самое.

И задержки на таком массиве получаются примерно как на RAID контроллере (~50 мкс на команду записи), так что большого смысла пока в RAID NVMe нет.

Кэш записи на 71605 выключен.
На 3700х кэш включен.
>SSD - сделайте им secure erase, и не создавайте массив на весь объем, процентов 25 оставьте свободными, должны заработать быстрее.
А вот это любопытно.
А что вы думаете по поводу контроллера 81605z ?

[hitower]

LSI шустрее, как правило. Но можете попробовать 8ю серию Adaptec, если они нравятся.
Еще, можете разделить SSD между 2-3 контроллерами, это тоже даст прирост в iops.

[Aleks3000]

LSI шустрее, как правило. Но можете попробовать 8ю серию Adaptec, если они нравятся.
Еще, можете разделить SSD между 2-3 контроллерами, это тоже даст прирост в iops.

Дело в том что у нас используется lsi 9361, на другом сервере, проблема в том что в гуе контроллера не отображается СМАРТ накопителей, а это не гуд.

[hitower]

LSI шустрее, как правило. Но можете попробовать 8ю серию Adaptec, если они нравятся.
Еще, можете разделить SSD между 2-3 контроллерами, это тоже даст прирост в iops.

Дело в том что у нас используется lsi 9361, на другом сервере, проблема в том что в гуе контроллера не отображается СМАРТ накопителей, а это не гуд.

А что там критичного надо смотреть?
По производительности 9361 шустрее, по моему, это более важный критерий.

[Aleks3000]

LSI шустрее, как правило. Но можете попробовать 8ю серию Adaptec, если они нравятся.
Еще, можете разделить SSD между 2-3 контроллерами, это тоже даст прирост в iops.

Дело в том что у нас используется lsi 9361, на другом сервере, проблема в том что в гуе контроллера не отображается СМАРТ накопителей, а это не гуд.

А что там критичного надо смотреть?
По производительности 9361 шустрее, по моему, это более важный критерий.

Ресурс, т.к. на накопителях критичные БД.

[Tert]

Aleks3000
Контроллер вам задолго до реального исчерпания ресурсов на SSD сообщит об этом.
А при исчерпании ресурсов SSD и массив просто перейдут в режим READ only. Данные не пропадут.

Гарантированный ресурс на запись на S3700 - 10 объемов диска ежедневно в течение 5 лет.
Кто у вас генерирует столько информации в день, что слежение за ресурсом на таких дисках становится актуальным?

[hitower]

Поддерживаю, лучше поставьте 1-2 SSD в hot spare, и не смотрите в SMART.
И, если хотите, можно на более производительные SAS SSD от HGST посмотреть. Ценник вполне разумный, раза в 1.5-2 дороже S3700.
RAID на SSD дисках не 5 или 6 случайно? Что-то уж очень большое время выполнения команд.