5014C-MT и AOC-IPMI20-E

[igorshergin]

Добрый день.

Добавил в сервер карту AOC-IPMI20-E, прошил RMCP+/P8SCT с диска, назначил IP, мак и подсеть из утилиты ipmicfg. На сервере ОС Fedora 9 x64, драйверы карт федоровские, карты в бондинге.

Работает странно: IPMIView соединяется, позволяет залогиниться, но при попытке что-нибудь посмотреть выдаёт в строке статуса "Getting FRU inventory device failed", после чего соединиться уже не удаётся до ресета карты.

Брак карты, или что-нибудь ещё надо посмотреть?

[KLIM_SPb]

Попробуйте прошить m/b

[setar]

поставили мак ? интересно какой ???
вы не сказали главного у вас IPMI выведен отдельным интерфейсом или мультиплексирован на eth0 ?
если мультиплексирование (а для этого и есть поле mac адреса ) то забудте об аппаратном бондинге - не умеют свичи бондить порт на котором два мака светятся.

[igorshergin]

Перешить биос попробую через недельку (сервер стоит в production environment в ДЦ). Действительно, я брал сервер аж в 2005-м, биос может быть несвежим.

> поставили мак ? интересно какой ???

Сначала обозначенный на слоте у материнки, потом совпадающий с маком первой карты и бондинга. Во втором случае часть пакетов начала теряться, а сам IPMI работал так же, как и раньше.

> вы не сказали главного у вас IPMI выведен отдельным
> интерфейсом или мультиплексирован на eth0 ?

А разве AOC-IPMI20-E можно вывести отдельно? Я бы не отказался.

> если мультиплексирование (а для этого и есть поле mac адреса ) то
> забудте об аппаратном бондинге - не умеют свичи бондить порт на
> котором два мака светятся.

Бондинг линуксовый.
Я так делал на куче 5015-х серверов, с таким же бондингом, и всё прекрасно работает, а вот с 5014 что-то не везёт.

И, кстати, можно ли в московском или питерском "Тринити" разжиться ещё одной картой?

[Tert]

igorshergin
В московском офисе такие платы есть. Лучше Вам напрямую позвонить к нам.

[setar]

Перешить биос попробую через недельку (сервер стоит в production environment в ДЦ). Действительно, я брал сервер аж в 2005-м, биос может быть несвежим.

> поставили мак ? интересно какой ???

Сначала обозначенный на слоте у материнки, потом совпадающий с маком первой карты и бондинга. Во втором случае часть пакетов начала теряться, а сам IPMI работал так же, как и раньше.

ходил я по этим граблям
причем никакой доки по этому нет!
мой алгоритм такой - сначала ставим мак как у  eth0, тем самым получая два физический устройства на порту eth0 которые конфликтуют меж собой.
следующий шаг - ставлю мак отличный от eth0 (родной или левый)
получаю два устройства на первом физическом порту с разными мак адресами.
как бы работает всё кроме аппаратного бондинга.
(правда может есть свичи которые умеют собирать аппаратный бондинг не портами а мак адресами, но у меня не получилось таких найти)

> вы не сказали главного у вас IPMI выведен отдельным
> интерфейсом или мультиплексирован на eth0 ?

А разве AOC-IPMI20-E можно вывести отдельно? Я бы не отказался.

да , конечно ....
... хотя почитав сайт этой инфы не нашел, может и путаю, но ведь на нем есть разъемы, в комплекте не было выкидываемого хвостика?  

> если мультиплексирование (а для этого и есть поле mac адреса ) то
> забудте об аппаратном бондинге - не умеют свичи бондить порт на
> котором два мака светятся.

Бондинг линуксовый.
Я так делал на куче 5015-х серверов, с таким же бондингом, и всё прекрасно работает, а вот с 5014 что-то не везёт.

не конкретно, нинукс поддерживает все типы бондинга пять их кажется (или шесть ?) в общем дайте как глянуть на
cat /proc/net/bonding/bond0

И, кстати, можно ли в московском или питерском "Тринити" разжиться ещё одной картой?

к сожалению тип карты устаревший, не возим больше

[setar]

igorshergin
В московском офисе такие платы есть. Лучше Вам напрямую позвонить к нам.

[тихо матерясь] а кагого фига я на микре в наш колокейшн сервер такую плату заказываю ? ...

[igorshergin]

> хотя почитав сайт этой инфы не нашел, может и путаю,
> но ведь на нем есть разъемы, в комплекте не было
> выкидываемого хвостика?  

Ни один из двух разъёмов не описан в документации, которая у меня есть, и хвостиков не поставляют (конкретно эта карта - новая, в коробке, из "Никса").

> нинукс поддерживает все типы бондинга пять их кажется
> (или шесть ?) в общем дайте как глянуть на
> cat /proc/net/bonding/bond0

root@core0% cat /proc/net/bonding/bond0
Ethernet Channel Bonding Driver: v3.2.5 (March 21, 2008)

Bonding Mode: fault-tolerance (active-backup)
Primary Slave: None
Currently Active Slave: eth0
MII Status: up
MII Polling Interval (ms): 100
Up Delay (ms): 0
Down Delay (ms): 0

Slave Interface: eth0
MII Status: up
Link Failure Count: 0
Permanent HW addr: 00:30:48:84:ca:64

Slave Interface: eth1
MII Status: up
Link Failure Count: 0
Permanent HW addr: 00:30:48:84:ca:65

Сначала по ошибке стоял round-robin, а не active/backup, но от исправления лучше не стало. При логине он теперь ещё выдаёт "Unable to raise session privilege". При этом прекрасно видны и мак, и IP, можно попинговать.

[setar]

Fault-tolerance это софтовый бондинг, тоже имеет право на жизнь, но тем не менее.

хардовый бондинг даёт такую строку :
Bonding Mode: IEEE 802.3ad Dynamic link aggregation
Transmit Hash Policy: layer2 (0)

причем Partner Mac Address должен быть не нулевым.

аппаратный бондинг настраивается как на сервере так и на коммутаторе.

[igorshergin]

Купил у вас вторую карту и воткнул во второй сервер. Полностью воспроизвёл проблему. :-/ Причём проявляется и до загрузки ОС, когда никакого бондинга ещё нет.

Попробую с support на супермикре попереписываться.

[igorshergin]

Купил у вас вторую карту и воткнул во второй сервер. Полностью воспроизвёл проблему. :-/ Причём проявляется и до загрузки ОС, когда никакого бондинга ещё нет.

Попробую с support на супермикре попереписываться.

[gs]

Стукнитесь к нашим сервисерам - Андрей Ермаков или Игорь Грицай.