Развалился 5-ТБ массив на HP Smart Array P410i

Поломалось, посыпалось, не работает...

Модераторы: Trinity admin`s, Free-lance moderator`s

Аватара пользователя
igornov
Advanced member
Сообщения: 194
Зарегистрирован: 15 окт 2002, 14:02
Откуда: Кривой Рог, Украина
Контактная информация:

Развалился 5-ТБ массив на HP Smart Array P410i

Сообщение igornov » 22 авг 2015, 03:53

Hi All!

Ранее один из дисков вылетел, но на Spare контроллер почему-то его не поменял... мои админы проворонили это и... теперь массив вообще не поднимается. Посоветуйте что можно сделать... на массиве есть ряд важных данных.

Массив Raid 5 из 13 дисков SATA (по 500 Гб)

maverlife
Advanced member
Сообщения: 186
Зарегистрирован: 28 янв 2014, 08:31
Откуда: Иркутск

Re: Развалился 5-ТБ массив на HP Smart Array P410i

Сообщение maverlife » 24 авг 2015, 06:24

можете более конкретно описать, что сообщает контроллер, статусы дисков - физических и логических?
а так думаю вам к специалистам по восстановлению данных из рейда. если есть бэкап, то дешевле, быстрее и проще поднять данные из него.

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: Развалился 5-ТБ массив на HP Smart Array P410i

Сообщение Stranger03 » 24 авг 2015, 13:24

igornov писал(а):Ранее один из дисков вылетел, но на Spare контроллер почему-то его не поменял... мои админы проворонили это и... теперь массив вообще не поднимается. Посоветуйте что можно сделать... на массиве есть ряд важных данных.
Если я првильно понял, то два диска вылетели с массива. Пробуйте по очереди эти диски вернуть в онлайн. По очереди. Если не получится, то только к дата-рекаверам. Но шансы на восстановление невелики.
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

Аватара пользователя
igornov
Advanced member
Сообщения: 194
Зарегистрирован: 15 окт 2002, 14:02
Откуда: Кривой Рог, Украина
Контактная информация:

Re: Развалился 5-ТБ массив на HP Smart Array P410i

Сообщение igornov » 25 авг 2015, 09:41

maverlife писал(а):Если я првильно понял, то два диска вылетели с массива. Пробуйте по очереди эти диски вернуть в онлайн. По очереди. Если не получится, то только к дата-рекаверам. Но шансы на восстановление невелики.
факта вылета 2-х дисков из массива не вижу. Один сгорел 3 месяца назад, на его место как оказалось всё-таки встал hotspare. Сейчас же этот hotspare стоит так как будто он и никогда не вставал вместо сбойного диска... Ну а все остальные диски в статусе OK. Хотя сам массив в статусе failed.

Вы пишете по одному вернуть в онлайн... но они все в статусе ОК + в утилитах к этому массиву нету никаких инструментов чтобы это сделать... можно только расширить массив, создать Spare или удалить массив...

Аватара пользователя
igornov
Advanced member
Сообщения: 194
Зарегистрирован: 15 окт 2002, 14:02
Откуда: Кривой Рог, Украина
Контактная информация:

Re: Развалился 5-ТБ массив на HP Smart Array P410i

Сообщение igornov » 25 авг 2015, 10:12

maverlife писал(а):можете более конкретно описать, что сообщает контроллер, статусы дисков - физических и логических?
а так думаю вам к специалистам по восстановлению данных из рейда. если есть бэкап, то дешевле, быстрее и проще поднять данные из него.
вот сообщает контроллер:

298 SATA Array B with Spare - 1 Logical Drive(s) contains a failed physical drive. To correct this problem, check the data and power connections to the physical drives or replace the failed drive. For more information, generate a diagnostics report under the Diagnostics tab.

274 0 MB SATA Drive at Port 4C : Box 2 : Bay 1 is bad or missing.
To correct this problem, check the data and power connections to the physical drive.

For more information, generate a diagnostics report under the Diagnostics tab.
271 (Failed) Logical Drive 2 (5.5 TB, RAID 5) has failed and cannot be used. All data on this logical drive has been lost. Configuration changes to this logical drive are not allowed until this problem is corrected. Also, if your controller supports Expansion, Extension, or Migration, these operations will not be available for any logical drives in the array until the problem is corrected.

Replace any failed physical drives and re-enable the failed logical drive. For more information, generate a diagnostics report under the Diagnostics tab.

Статусы физических дисков - ОК

Логический диск в статусе Failed

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: Развалился 5-ТБ массив на HP Smart Array P410i

Сообщение Stranger03 » 25 авг 2015, 10:28

igornov писал(а):факта вылета 2-х дисков из массива не вижу. Один сгорел 3 месяца назад, на его место как оказалось всё-таки встал hotspare. Сейчас же этот hotspare стоит так как будто он и никогда не вставал вместо сбойного диска... Ну а все остальные диски в статусе OK. Хотя сам массив в статусе failed.
У вас был Р5 из скольки-то дисков + хотспаре, один диск вылетел, на его место "встал" диск с хотспаре.
1. с чего вы сделали такой вывод?
2. у вас есть рейдгруппа, в группе все диски в онлайн (не ОК, а онлайн)?
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: Развалился 5-ТБ массив на HP Smart Array P410i

Сообщение Stranger03 » 25 авг 2015, 10:31

igornov писал(а):298 SATA Array B with Spare - 1 Logical Drive(s) contains a failed physical drive. To correct this problem, check the data and power connections to the physical drives or replace the failed drive. For more information, generate a diagnostics report under the Diagnostics tab.
Если массив в состоянии файлед, значит пара дисков из него лежит. Если все диски в онлайне включая тот странный диск с хотспаре, но группа лежит, то значит где-то логическая ошибка. Попробуйте поодиночке переводил диски в группе в оффлайн и обратно. Может и взлетит. Но я бы уже пошел к дата-рекаверам.
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

Аватара пользователя
igornov
Advanced member
Сообщения: 194
Зарегистрирован: 15 окт 2002, 14:02
Откуда: Кривой Рог, Украина
Контактная информация:

Re: Развалился 5-ТБ массив на HP Smart Array P410i

Сообщение igornov » 25 авг 2015, 12:00

Stranger03 писал(а): Если массив в состоянии файлед, значит пара дисков из него лежит. Если все диски в онлайне включая тот странный диск с хотспаре, но группа лежит, то значит где-то логическая ошибка. Попробуйте поодиночке переводил диски в группе в оффлайн и обратно. Может и взлетит. Но я бы уже пошел к дата-рекаверам.
Все диски в онлайне... только вот функционала по выводу дисков в офлайн (и обратно в онлайн) в отличии от других моделей массивов (не HP) нету вообще. Я могу только удалить массив и создать по новой... но при этом скорее всего запустится инициализация массива, которая затрёт данные. В настройках контроллера тоже нету ничего как это можно отключить?

Подскажите плиз где в утилитах HP Smart Array P410i есть сиё? (перевод в офлайн и обратно + отключении инициализации)

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: Развалился 5-ТБ массив на HP Smart Array P410i

Сообщение Stranger03 » 25 авг 2015, 12:16

igornov писал(а):Подскажите плиз где в утилитах HP Smart Array P410i есть сиё? (перевод в офлайн и обратно + отключении инициализации)
Посмотрю, выложите логи и скриншоты с ACU.
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: Развалился 5-ТБ массив на HP Smart Array P410i

Сообщение Stranger03 » 25 авг 2015, 12:35

igornov
Мда, все документы, что я нашел по этому контроллеру, отправляют в саппорт ХП. По крайней мере траблшутинг у них один - коннект то саппорт ХП.
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

Аватара пользователя
igornov
Advanced member
Сообщения: 194
Зарегистрирован: 15 окт 2002, 14:02
Откуда: Кривой Рог, Украина
Контактная информация:

Re: Развалился 5-ТБ массив на HP Smart Array P410i

Сообщение igornov » 25 авг 2015, 12:41

Stranger03 писал(а): igornov
Мда, все документы, что я нашел по этому контроллеру, отправляют в саппорт ХП. По крайней мере траблшутинг у них один - коннект то саппорт ХП.

то есть скриншоты и логи уже ни к чему?

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: Развалился 5-ТБ массив на HP Smart Array P410i

Сообщение Stranger03 » 25 авг 2015, 12:58

igornov писал(а):то есть скриншоты и логи уже ни к чему?
Ну это только подозрения, за действия ручаться не могу. Но суть примерно в следующем. У вас по вашим словам работал Р5, вылетел диск, на его место встал хотспаре. Вот этот момент надо бы по логам посмотреть, ибо все только с ваших слов. Если все так, то в каком-то промежутке времени массив был в норме. Тут что-то произошло, массиву пришел кирдык. Произойти это могло в двух случаях:
1. вылетели два диска
2. вылетел один диск, в момент вылета произошел программный сбой внутри контроллера.
Далее (чисто предположения), два сбойных диска после перезагрузки вдруг нарисовались в онлайне, но из-за рассинхронизации данных массиву пришел кирдык. Вот и надо выяснить, что это за диск. Для этого надо смотреть полный лог.
Что б я еще сделал, все диски протестил бы на другом компе утилитами на предмет физических ошибок, смарты, бедблоки и так далее. Возможно один из дисков совсем плохой. Вот без него можно было бы попробовать стартануть. Но для кучи я бы перед всеми процедурами с каждого диска снял слепки. Ибо велика вероятность вам пойти к дата рекаверам.
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

Аватара пользователя
igornov
Advanced member
Сообщения: 194
Зарегистрирован: 15 окт 2002, 14:02
Откуда: Кривой Рог, Украина
Контактная информация:

Re: Развалился 5-ТБ массив на HP Smart Array P410i

Сообщение igornov » 25 авг 2015, 13:23

Stranger03 писал(а):
igornov писал(а):Подскажите плиз где в утилитах HP Smart Array P410i есть сиё? (перевод в офлайн и обратно + отключении инициализации)
Посмотрю, выложите логи и скриншоты с ACU.
Вложения
Физические
Физические
Логические диски
Логические диски
report-47be8f98-00000fc8-00000000.zip
Все логи
(243.33 КБ) 448 скачиваний

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: Развалился 5-ТБ массив на HP Smart Array P410i

Сообщение Stranger03 » 25 авг 2015, 13:57

"igornov"
Вот что я вижу:

26-го мая вылетел диск Box 2: Bay 1:

Код: Выделить всё

===== Start of Option ROM POST Message Log =====
1719-Slot 0 Drive Array - A controller failure event occurred prior to this
     power-up.  (Previous lock up code = 0xAB)
1792-Slot 0 Drive Array - Valid Data Found in Array Accelerator
     Data will automatically be written to drive array.
1784-Slot 0 Drive Array - Drive Failure
     The following disk drive(s) are failed and should be replaced:
         Port 4C: Box 2: Bay 1
     On-Line Spare Drive Active
===== End of Option ROM POST Message Log =====
Вам выло предложено заменить диск. Хотспаре не сработал. Далее по перезагрузкам видно, что этот диск все время был в состоянии сбоя до 22 августа, когда вылетел еще один диск Box 2: Bay 8:

Код: Выделить всё

===== Start of Option ROM POST Message Log =====
1792-Slot 0 Drive Array - Valid Data Found in Array Accelerator
     Data will automatically be written to drive array.
1784-Slot 0 Drive Array - Logical Drive Failure
     The following disk drive(s) are failed and should be replaced:
         Port 4C: Box 2: Bay 8
===== End of Option ROM POST Message Log =====
Ну а далее можно уже не смотреть. Хоспаре не встал, двум дискам кирдык, шансы на восстановление почти равны нулю.
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: Развалился 5-ТБ массив на HP Smart Array P410i

Сообщение Stranger03 » 25 авг 2015, 13:58

igornov
Вытаскивайте диски из 1-го и 8-го бокса, проверяйте утилитами. Если в 8-м боксе диск живой, попробуйте стартануть без 1-го диска. Может и получится. Хотспаре у вас не сработал.
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

Ответить

Вернуться в «Массивы - Технические вопросы, решение проблем.»

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 30 гостей