Отваливаются диски из RAID

У вас сложности? Наши специалисты постараются помочь вам. Если вы сами сталкивались с похожими проблемами - поделитесь опытом.

Модераторы: Trinity admin`s, Free-lance moderator`s

Ответить
StanSpb
Junior member
Сообщения: 7
Зарегистрирован: 29 май 2019, 15:16

Отваливаются диски из RAID

Сообщение StanSpb » 29 май 2019, 15:54

Есть сервер в корпусе
Supermicro CSE847 4U, 36 дисков
c корзиной спереди SAS846A ( плюс сзади на 12 дисков)
на Материнке X9DRH-iF
Изначально был на контроллере Intel RS2BL080
SAS Expander RES2SV240 2шт. Подключены по одному каналу на каждый экспандер.
Так вот. Время от времени из этого сервера выпадали диски (раз в 1-4 мес). Совершенно непредсказуемо и совершенно разные.
Сначала их меняли по гарантии, потом меняли мы сами, последнее время диски начали выпадать чаще, и по несколько саразу.
Мне это надоело, я вывел его из работы и начал с ним работать отдельно.
У нас имелся в запасе контроллер Adaptec 6805, и я попробовал поставить его.
С адаптеком выпадение ускорилось.
А вот когда я убрал их цепочки экспандеры, то выпадение прекратилось. Мало того, я добавил контроллер Интел и подключил еще 8 дисков на него. Тоже всё стабильно.
То есть 8 + 8 дисков, скомутированных с корзины сразу на контроллер работают стабильно.
Начальник сделал предположение что это из-за количества дисков (изначально было 20 SATA в одном RAID5) и я подключил только 8 дисков, но уже через экспандер. Диск выпал менее чем через час.
Из всего этого я сделал заключение что виноваты именно экспандеры.
И правда, что делают Intel экспандеры в SuperMicro мамеке с Supermicro корзиной? Нет, я конечно понимаю что контроллер интел, но экспандер это скорее часть корзины чем контроллера, как мне казалось... и в другом сервере у нас экспандер стоит в специальном месте, прикрученный к корпусу. И работает нормально, кстати :)
Самое плохое что я не нашел конкретного экспандера для этого корпуса/материнки. Может подскажете? Или что-то другое предпринять?

hitower
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 357
Зарегистрирован: 23 дек 2007, 15:35
Откуда: Москва
Контактная информация:

Re: Отваливаются диски из RAID

Сообщение hitower » 31 май 2019, 16:57

Бэкплейны с экспандером:
BPN-SAS3-846EL1 на 24 диска
BPN-SAS3-826EL1 на 12 дисков

StanSpb
Junior member
Сообщения: 7
Зарегистрирован: 29 май 2019, 15:16

Re: Отваливаются диски из RAID

Сообщение StanSpb » 03 июн 2019, 09:15

hitower писал(а):Бэкплейны с экспандером:
BPN-SAS3-846EL1 на 24 диска
BPN-SAS3-826EL1 на 12 дисков
Большое спасибо! я видел эти бэкплейны, но почему-то думал что существует какой-то специальный экспандер :)

hitower
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 357
Зарегистрирован: 23 дек 2007, 15:35
Откуда: Москва
Контактная информация:

Re: Отваливаются диски из RAID

Сообщение hitower » 03 июн 2019, 10:32

Есть еще несколько вариаций, на 6Гбит, с 2 путями (для дисков SAS), если будете искать б/у - избегайте 3Гбит экспандеров, с ними и SATA дисками были проблемы в свое время.

StanSpb
Junior member
Сообщения: 7
Зарегистрирован: 29 май 2019, 15:16

Re: Отваливаются диски из RAID

Сообщение StanSpb » 03 июн 2019, 11:03

Нам еще предложили взять контроллер MegaRAID SAS 9365-28i и без экспандэра использовать, сразу в корзину. Плюс 2й контроллер наш оставить тоже без экспандера. По цене получается +/- одинаково. С 2мя контроллерами, как я уже писал, нормально работало. Мы фирма, нам новое надо.

hitower
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 357
Зарегистрирован: 23 дек 2007, 15:35
Откуда: Москва
Контактная информация:

Re: Отваливаются диски из RAID

Сообщение hitower » 03 июн 2019, 11:36

Не забудьте договориться заранее о возврате денег за 9365-28i, когда обнаружите, что он в корпус не влезает.
У Вас почти наверняка корпус с LP картами.
Рекомендую вариант проще - LSI 9361-4i + поменять бэкплейны на вариант с экспандерами.
Проверено неоднократно, проблем не было.

StanSpb
Junior member
Сообщения: 7
Зарегистрирован: 29 май 2019, 15:16

Re: Отваливаются диски из RAID

Сообщение StanSpb » 03 июн 2019, 12:11

Ой, а ведь и правда...

hitower
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 357
Зарегистрирован: 23 дек 2007, 15:35
Откуда: Москва
Контактная информация:

Re: Отваливаются диски из RAID

Сообщение hitower » 03 июн 2019, 14:01

Да, и еще вопрос - а что за диски использовали?

StanSpb
Junior member
Сообщения: 7
Зарегистрирован: 29 май 2019, 15:16

Re: Отваливаются диски из RAID

Сообщение StanSpb » 03 июн 2019, 17:33

SSD Intel 520 Series 240Gb
SAS Seagate ST600MM0006 600Gb
SATA Hitachi 647466-001 500Gb
SATA ST500DM002 500Gb
Выпадали совершенно вразнобой. Даже выделить невозможно какие чаще какие реже.

hitower
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 357
Зарегистрирован: 23 дек 2007, 15:35
Откуда: Москва
Контактная информация:

Re: Отваливаются диски из RAID

Сообщение hitower » 03 июн 2019, 17:46

StanSpb писал(а):SSD Intel 520 Series 240Gb
SAS Seagate ST600MM0006 600Gb
SATA Hitachi 647466-001 500Gb
SATA ST500DM002 500Gb
Выпадали совершенно вразнобой. Даже выделить невозможно какие чаще какие реже.
SATA ST500DM002 500Gb - вот эти вряд-ли будут стабильно работать
С остальными проблем быть не должно.

StanSpb
Junior member
Сообщения: 7
Зарегистрирован: 29 май 2019, 15:16

Re: Отваливаются диски из RAID

Сообщение StanSpb » 05 июн 2019, 13:05

HiTower, как с вами связаться и пообщаться на предмет ремонта этого сервера?

Аватара пользователя
AntonK
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 43
Зарегистрирован: 17 апр 2017, 12:13
Откуда: Москва
Контактная информация:

Re: Отваливаются диски из RAID

Сообщение AntonK » 05 июн 2019, 13:40

StanSpb писал(а):HiTower, как с вами связаться и пообщаться на предмет ремонта этого сервера?
Максим +7 (495) 232 92 30 ext. 1204
trinitygroup.ru
3nt.ru

Supermicro, HPE, DELL, IBM, INTEL, EMC, WD, Toshiba, Fujitsu, Hitachi, NetApp, Seagate, Cisco
Решаем IT задачи любой сложности - Trinitygroup.ru

Ответить

Вернуться в «Серверы - Решение проблем»

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 20 гостей