RAID 5EE

Поломалось, посыпалось, не работает...

Модераторы: Trinity admin`s, Free-lance moderator`s

Ответить
alex31
Power member
Сообщения: 35
Зарегистрирован: 09 апр 2008, 14:18
Откуда: Волгоград

RAID 5EE

Сообщение alex31 » 03 авг 2009, 11:26

Добрый день!
Контроллер IBM ServeRAID 8i. Собран массив 5EE из 6 дисков.
Сегодня заметил сильное замедление в работе сервера.
Глянул, в ServerRAID manager - 5 дисков в онлайне, 1 отсутствует.
Состояние массива - critical, идет compacting.
Вопрос - по окончании сжатия массив станет работоспособным и я должен буду заменить сбойный винт,
после чего должно запуститься восстановление массива к досбойному состоянию.
Дело в том, что возможно массив сбойнул из-за того, что салазки с диском были не защелкнуты.
Я к тому, что стоит ли попробовать оставить сбойный винт и загрузиться ещё раз с ним?
Или не рисковать, а воткнуть новый (имеется в наличии)?

Аватара пользователя
DeadMazay
Advanced member
Сообщения: 1743
Зарегистрирован: 20 сен 2007, 15:07
Откуда: Новосибирск, Мск
Контактная информация:

Re: RAID 5EE

Сообщение DeadMazay » 03 авг 2009, 11:40

alex31 писал(а):Добрый день!
Контроллер IBM ServeRAID 8i. Собран массив 5EE из 6 дисков.
Сегодня заметил сильное замедление в работе сервера.
Глянул, в ServerRAID manager - 5 дисков в онлайне, 1 отсутствует.
Состояние массива - critical, идет compacting.
Вопрос - по окончании сжатия массив станет работоспособным и я должен буду заменить сбойный винт,
после чего должно запуститься восстановление массива к досбойному состоянию.
Дело в том, что возможно массив сбойнул из-за того, что салазки с диском были не защелкнуты.
Я к тому, что стоит ли попробовать оставить сбойный винт и загрузиться ещё раз с ним?
Или не рисковать, а воткнуть новый (имеется в наличии)?
винт продиагностировать... если уверенны что живой, после низкоуровневого форматирования можно вернуть в строй

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Re: RAID 5EE

Сообщение gs » 03 авг 2009, 12:40

Если диск не был досунут до места, то немудрено...

Дождитесь окончания компактинга, форматните тот диск на другой машине, воткните на место. Если копибэк не пойдет сам, толкните руками.

alex31
Power member
Сообщения: 35
Зарегистрирован: 09 апр 2008, 14:18
Откуда: Волгоград

Re: RAID 5EE

Сообщение alex31 » 03 авг 2009, 12:43

продиагностировать не на чем, диск SAS... надо покупать SAS-контроллер

alex31
Power member
Сообщения: 35
Зарегистрирован: 09 апр 2008, 14:18
Откуда: Волгоград

Re: RAID 5EE

Сообщение alex31 » 03 авг 2009, 14:21

и еще такой вопрос, а почему так долго идет компактинг,
за 5 часов прошло 7% (итого сейчас 24)?
Читал что "технология 5EE значительно ускоряет восстановление после сбоя системы".
Полдня контора стоит, не знаю, закончится ли к утру...

P.S. массив 6 дисков по 73.4 Gb

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Re: RAID 5EE

Сообщение gs » 03 авг 2009, 15:59

Возможно выключен кэш на контроллере, возможно нагрузка боевая сохраняется...

alex31
Power member
Сообщения: 35
Зарегистрирован: 09 апр 2008, 14:18
Откуда: Волгоград

Re: RAID 5EE

Сообщение alex31 » 04 авг 2009, 08:27

доброе утро!
К утру процесс компактинга не закончился (только 61%), нагрузки все сутки не было, кэш включен.
Руководство больше ждать не хочет, мотивирует тем, что столь долго процесс нормально идти не может,
что-то не то ... придется все остановить, слить инфу и поднять сервак заново.
Как быть?

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Re: RAID 5EE

Сообщение gs » 04 авг 2009, 13:00

Так Вы сервер остановили что-ли? Зачем? Пускай бы себе в фоне отрабатывало.

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Re: RAID 5EE

Сообщение gs » 04 авг 2009, 13:01

Это действительно странно, но непонятно почему.
Почему бы не запросить саппорт вендора?

alex31
Power member
Сообщения: 35
Зарегистрирован: 09 апр 2008, 14:18
Откуда: Волгоград

Re: RAID 5EE

Сообщение alex31 » 04 авг 2009, 13:14

пока не остановили, в IBM запрос сделали.
Просто ситуация настораживает, слишком уж долго всё...
и сервак тормозит жутко, без нагрузки

alex31
Power member
Сообщения: 35
Зарегистрирован: 09 апр 2008, 14:18
Откуда: Волгоград

Re: RAID 5EE

Сообщение alex31 » 04 авг 2009, 13:22

предположительно компактинг закончится к завтр. утру (3% в час).
Согласитесь, двое суток на данную операцию...
боюсь, есть какая-то глубинная проблема

alex31
Power member
Сообщения: 35
Зарегистрирован: 09 апр 2008, 14:18
Откуда: Волгоград

Re: RAID 5EE

Сообщение alex31 » 05 авг 2009, 08:39

Сообщаю о дальнейшем развитии ситуации.
Компактинг завершился, проблема усугубилась.
Один из винтов, который был в онлайне, перешел в статус Defunct, состояние массива Critical.
Сервер ожил, производительность нормальная, сейчас сливаем с него инфу.
Планируем перебить массив заново, в RAID 1 + RAID5, либо RAID 50 (в зависимости
от того, сколько у нас реально винтов живых осталось).
Саппорт вендора пока молчит.

alex31
Power member
Сообщения: 35
Зарегистрирован: 09 апр 2008, 14:18
Откуда: Волгоград

Re: RAID 5EE

Сообщение alex31 » 06 авг 2009, 14:52

Для тех, кому интересно, расскажу чем же закончилась история.
А завершилась она, как ни странно, хэппи эндом,
хотя начиналась как страшная сказка.
После 2-х суточного компактинга, жутких тормозов, нервов руководства, пропажи из оснастки одного винта,
потом defunct второму, обращения к вендору, его заверений, что винтам хана, когда уже было 100%-ное намерение перебивать массив,
перезагрузили сервак. И началось.... После перезагрузки нашлись все 6 винтов,
на тот, который дефункт, контроллер запустил ребилд, завершившийся успешно.
Тот винт, что изначально не виделся, определился как READY (типа вне массива, сам по себе).
Путного из него можно было сделать только хот-спаре (судя по контекстному меню), что и оставалось (хотя понятно, что для 5EE оно не особенно нужно). Однако...
После ребилда контроллер сам инициировал экспандинг на этот ready винт. И тоже все прошло успешно.
В итоге - полностью рабочий массив за 3 часа.

В чем проблема - так и осталось тайной, вендор сказал, что дрова и микрокод на контроллере старые, возможно глюки из-за этого. Меня больше волновало долгое время компактинга, просто повезло, что нам дали столько времени на работу... Думаю, проблема в том, что одновременно сбойнули 2 винта, вот он бедный и напрягался.. хотя тачка мощная 4 проца и 8гб мозгов.

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Re: RAID 5EE

Сообщение gs » 06 авг 2009, 15:00

Количество процессоров в данном случае значения не имеет, ибо работал процессор контроллера. Вероятно действительно или просто глюк, или скрытая проблема на винтах.
Перешивайтесь и мониторьте ситуацию.

Black-Dragon
Advanced member
Сообщения: 507
Зарегистрирован: 17 апр 2009, 00:49
Откуда: Yerevan

Re: RAID 5EE

Сообщение Black-Dragon » 06 авг 2009, 15:11

alex31 писал(а):Тот винт, что изначально не виделся, определился как READY (типа вне массива, сам по себе).
Путного из него можно было сделать только хот-спаре (судя по контекстному меню), что и оставалось (хотя понятно, что для 5EE оно не особенно нужно). Однако...После ребилда контроллер сам инициировал экспандинг на этот ready винт.
Чего и следовало ожидать, ведь изначально у вас был RAID5EE, который после компактинга превращается в 5-й, а при замене неисправного винта (что в данном случае и показалось контроллеру) вертает взад 5EE.

Ответить

Вернуться в «Массивы - Технические вопросы, решение проблем.»

Кто сейчас на конференции

Сейчас этот форум просматривают: Bing [Bot] и 23 гостя