IBM DS5100: на пинг не отвечает, через консоль не зайти
Модераторы: Trinity admin`s, Free-lance moderator`s
IBM DS5100: на пинг не отвечает, через консоль не зайти
IBM 5100, до недавнего времени все нормально, неожиданно перестали отзываться по сети оба контроллера, при этом основной функционал не затронут, все работает (тук-тук-тук).
Проверка показала, что на сетевых интерфейсах постоянно up/down, игры в portfast, 100-full, подключение нотебуком, подключение нотебуком через промежуточный простой свитч к успехам не привели.
Решили попробовать подключиться через консоль, пользовались инструкцией:
http://bazanovv.livejournal.com/30775.html
Консоль появляется, если нажать S, то пароль DSStorage не срабатывает (назвать текущую версию ПО затрудняюсь), если нажать ESC, то появляется запрос логина и пароля, под первым "правильным" вариантом даже что-то происходит, во всяком случае после логина и пароля ругани нет, но и никакой реакции. Попытка вводить команды ничего не дает.
Может сталкивался кто? Есть советы, что еще до перезагрузки по питанию попробовать?
По FC подключена к серверу с VMWare, не ясно прокатит такой вариант или нет перехвата управления.
Проверка показала, что на сетевых интерфейсах постоянно up/down, игры в portfast, 100-full, подключение нотебуком, подключение нотебуком через промежуточный простой свитч к успехам не привели.
Решили попробовать подключиться через консоль, пользовались инструкцией:
http://bazanovv.livejournal.com/30775.html
Консоль появляется, если нажать S, то пароль DSStorage не срабатывает (назвать текущую версию ПО затрудняюсь), если нажать ESC, то появляется запрос логина и пароля, под первым "правильным" вариантом даже что-то происходит, во всяком случае после логина и пароля ругани нет, но и никакой реакции. Попытка вводить команды ничего не дает.
Может сталкивался кто? Есть советы, что еще до перезагрузки по питанию попробовать?
По FC подключена к серверу с VMWare, не ясно прокатит такой вариант или нет перехвата управления.
- Stranger03
- Сотрудник Тринити
- Сообщения: 12979
- Зарегистрирован: 14 ноя 2003, 16:25
- Откуда: СПб, Екатеринбург
- Контактная информация:
Re: IBM DS5100: на пинг не отвечает, через консоль не зайти
Я бы начал с полного бекапа.hystrix писал(а):Есть советы, что еще до перезагрузки по питанию попробовать?
Re: IBM DS5100: на пинг не отвечает, через консоль не зайти
Из общих соображений или можно предположить (по опыту) серьезную проблему с СХД?Stranger03 писал(а):Я бы начал с полного бекапа.hystrix писал(а):Есть советы, что еще до перезагрузки по питанию попробовать?
На СХД виртуальные машины VMWare, резервные копии делаются Veeam регулярно, хотя само восстановление займет длительное время (как из-за поиска нового СХД, доставки и подключения, так и из-за времени развертывания такого объема данных).
Если все серьезно, то начнем с поиска подменного СХД и полной миграции данных на него.
- Stranger03
- Сотрудник Тринити
- Сообщения: 12979
- Зарегистрирован: 14 ноя 2003, 16:25
- Откуда: СПб, Екатеринбург
- Контактная информация:
Re: IBM DS5100: на пинг не отвечает, через консоль не зайти
Трудно сказать, надо смотреть на логи. Если честно, шанс, что оба контроллера резко сдохли, очень невелик. Если только один контроллер вам не посылал сигналы весь прошлый год, а по ходу и второй. Возможно банальная перезагрузка поможет, но я бы не рисковал без наличия полного бекапа, с которого предварительно проведена процедура восстановления (то есть мы убедились, что бекап живой)hystrix писал(а):Из общих соображений или можно предположить (по опыту) серьезную проблему с СХД?
Вы с какого города? Поправьте город в профиле.Если все серьезно, то начнем с поиска подменного СХД и полной миграции данных на него.
Re: IBM DS5100: на пинг не отвечает, через консоль не зайти
To hystrix:
На DS не сталкивался с набором симптомов, а на софтовых стораджах под Linux такое наблюдается после серьёзного повреждения файловой системы и после рестарта они уже не загружаются.
На DS не сталкивался с набором симптомов, а на софтовых стораджах под Linux такое наблюдается после серьёзного повреждения файловой системы и после рестарта они уже не загружаются.
Re: IBM DS5100: на пинг не отвечает, через консоль не зайти
1. Город добавил, СПб!-)Stranger03 писал(а):Трудно сказать, надо смотреть на логи. Если честно, шанс, что оба контроллера резко сдохли, очень невелик. Если только один контроллер вам не посылал сигналы весь прошлый год, а по ходу и второй. Возможно банальная перезагрузка поможет, но я бы не рисковал без наличия полного бекапа, с которого предварительно проведена процедура восстановления (то есть мы убедились, что бекап живой)hystrix писал(а):Из общих соображений или можно предположить (по опыту) серьезную проблему с СХД?
Вы с какого города? Поправьте город в профиле.
2. Чтобы смотреть на логи надо сперва восстановить доступ к СХД, а оно по IP не отвечает, результаты доступа через serial также неудовлетворительны.
3. Админ дает признательные показания, что в течение месяца точно работал с СХД, проблем не наблюдалось.
4. Бэкапы тестируются автоматически, степень доверия к ним выше среднего, сейчас проверяем полноту.
Есть две рабочие версии:
1. Админ оставил софт подключенным к СХД на длительный период, что и привело к такому эффекту (нашел описание подобного глюка).
2. В сети прошли какие-то пакеты, которые вызвали частичный отказ софта СХД.
Хотим все-таки перезагрузить один из двух контроллеров, но есть непонимание:
1. Как это сделать, т.к. просто отключение питания не поможет, у DS5100 же питание между ними еще резервировано? Разрывать его не хочется. Может есть другие способы? По мануалам не нашел!-(
2. Корректна ли вообще перезагрузка одного контроллера по питанию в DS5100?
Re: IBM DS5100: на пинг не отвечает, через консоль не зайти
Перезагрузки самого СХД по питанию не было, судя по индикаторам функционирует оно нормально, данные доступны (в том числе проверено ночным бэкапом, который забрал изменения).Bormoto писал(а):To hystrix:
На DS не сталкивался с набором симптомов, а на софтовых стораджах под Linux такое наблюдается после серьёзного повреждения файловой системы и после рестарта они уже не загружаются.
Re: IBM DS5100: на пинг не отвечает, через консоль не зайти
Я имею в виду файловую систему, на которой сама OS хранилки. Вот, как раз, данные доступны, OS в памяти доступ обеспечивает, а управлять уже никак. Правда, у вас ситуация иная - два контроллера. После снятия свежих бэкапов и отключения клиентов, можно попробовать по очереди вытаскивать контроллеры и отслеживать изменение состояния.hystrix писал(а): Перезагрузки самого СХД по питанию не было, судя по индикаторам функционирует оно нормально, данные доступны (в том числе проверено ночным бэкапом, который забрал изменения).
Re: IBM DS5100: на пинг не отвечает, через консоль не зайти
Вопрос в том, можно ли у DS5100 вытаскивать контроллер, если перед этим он не был выведен из обслуживания программно?Bormoto писал(а):После снятия свежих бэкапов и отключения клиентов, можно попробовать по очереди вытаскивать контроллеры и отслеживать изменение состояния.
P.S. MAC-то от СХД прилетает, попробуем воткнуться нотебуком, записать трафик, посмотреть какие ARP-пакеты летят.
Re: IBM DS5100: на пинг не отвечает, через консоль не зайти
Поработали снифером, летит ARP от СХД, в нем указан верный адрес. Попытки просто соединений на 80-й, 443-й не удались, почти сразу идет up/down интерфейса.hystrix писал(а):MAC-то от СХД прилетает, попробуем воткнуться нотебуком, записать трафик, посмотреть какие ARP-пакеты летят.
- Stranger03
- Сотрудник Тринити
- Сообщения: 12979
- Зарегистрирован: 14 ноя 2003, 16:25
- Откуда: СПб, Екатеринбург
- Контактная информация:
Re: IBM DS5100: на пинг не отвечает, через консоль не зайти
Она же файберная, соединитесь напрямую с хостом. В конце то концов, возьмите писюк с файберной карточкой (либо 2-х портовая, либо пару однопортовых), подключите напрямую к СХД (там минимум по 2-а порта на контроллер, если не по 4-е, не помню уже). Поставьте СМ и попробуйте подключится через файбер. Я бы не перегружал, до тех пор, пока нет подменки и данные не переброшены на нее.hystrix писал(а):Поработали снифером, летит ARP от СХД, в нем указан верный адрес. Попытки просто соединений на 80-й, 443-й не удались, почти сразу идет up/down интерфейса.
П.С. у нас большой тех.отдел в Питере. Если готовы будете оплатить работы и подменку на время попыток восстановления, ребята могут взяться.
Re: IBM DS5100: на пинг не отвечает, через консоль не зайти
К сожалению все FC заняты, на сегодня как раз запланирован этот вариант.
Спасибо за предложение, подумаем.
Спасибо за предложение, подумаем.
- Stranger03
- Сотрудник Тринити
- Сообщения: 12979
- Зарегистрирован: 14 ноя 2003, 16:25
- Откуда: СПб, Екатеринбург
- Контактная информация:
Re: IBM DS5100: на пинг не отвечает, через консоль не зайти
Подключите через коммутатор. Ничего сложного. По любому для переезда вам понадобиться коммутатор.hystrix писал(а):К сожалению все FC заняты, на сегодня как раз запланирован этот вариант.
Re: IBM DS5100: на пинг не отвечает, через консоль не зайти
1. Вчера удалось все-таки пробиться к СХД по FC (причем из виртуальной машины!-), никаких критичных ошибок, поведение нормальное.
2. Попытались сменить сетевые настройки, отключали и включали IPv4 - проблема не изменилась, поведение то же самое.
3. Перекинули все массивы на контроллер A, контроллер B отправили в Offline, потом включили в Online. После включения контроллера на нем обнаружился адрес по умолчанию (возможно последствие п.2), который нормально пинговался, управление подключилось.
4. Перекинули все массивы на контроллер B, контроллер A отправили в Offline, потом включили в Online. После включения он думал, потом показывал адрес 0.0.0.0, потом вспомнил сам ранее настроенный адрес, который также нормально запинговался, управление подключилось.
Таким образом проблема решена, возможно кому-то пригодится информация.
К сожалению причина такого поведения не ясна, доступные лога ответ не дали, сервиса нет.
Всем большое спасибо!
2. Попытались сменить сетевые настройки, отключали и включали IPv4 - проблема не изменилась, поведение то же самое.
3. Перекинули все массивы на контроллер A, контроллер B отправили в Offline, потом включили в Online. После включения контроллера на нем обнаружился адрес по умолчанию (возможно последствие п.2), который нормально пинговался, управление подключилось.
4. Перекинули все массивы на контроллер B, контроллер A отправили в Offline, потом включили в Online. После включения он думал, потом показывал адрес 0.0.0.0, потом вспомнил сам ранее настроенный адрес, который также нормально запинговался, управление подключилось.
Таким образом проблема решена, возможно кому-то пригодится информация.
К сожалению причина такого поведения не ясна, доступные лога ответ не дали, сервиса нет.
Всем большое спасибо!
Кто сейчас на конференции
Сейчас этот форум просматривают: Google [Bot] и 68 гостей