IBM Storwize V7000

[metallic]

Попала мне в руки игрушка IBM Storwize V7000, пытаюсь ее прицепить к хосту по оптике(ранее опыта по подключению хранилки через оптику не было, только сас).
Вроде бы все что надо сконфигурировал, сделал рейды, объединил их в пул, нарезал том для теста 500Гб. Далее необходимо примапить том к хосту. В этом и проблема. Начинаю добавлять хост, но в списке хостов ничего нет (я так понимаю там автоматически должны появляться хосты?).
Сервер подключен к хранилке оптическим шнурком в первый оптический порт первого контроллера.
Смотрите рисунок ниже.



Захожу в Service Assistant Tool и там вижу, что линка нет (рис. ниже)



Теперь о сервере:
IBM x3650
Fibre Channel: QLogic Corp. ISP2532-based 8Gb Fibre Channel to PCI Express HBA
ОС Debian 6.0 x64

Что я делаю не так?

[Stranger03]

Теперь о сервере:
IBM x3650
Fibre Channel: QLogic Corp. ISP2532-based 8Gb Fibre Channel to PCI Express HBA
ОС Debian 6.0 x64

Что я делаю не так?

Как подключен сервер? Почему этот вопрос не задать продавцу?
P.S. я даже знаю на 90%, почему у вас не получается....

[metallic]

Как подключен сервер?

Что имеется ввиду?
В сервере стоит Qlogic QLE2560 (два штуки, к обоим пробовал подключать). К нему (к HBA QLE2560) с помощью оптоволоконного патчкорда подключена голова хранилки.

Почему этот вопрос не задать продавцу?

Ну я задавал, пока что ничем помочь не смогли.

P.S. я даже знаю на 90%, почему у вас не получается....

Скажите пожалуйста, куда рыть

[Stranger03]

Ну я задавал, пока что ничем помочь не смогли.

Не правда ли, компетенция ваших продавцов равна бокс-мувингу, стоит очень сильно задуматься,

Скажите пожалуйста, куда рыть

Сторвайз не работает без коммутаторов, нужен любой из FC коммутаторов, хотя бы Qlogic 1400 или IBM SAN24B

[metallic]

Не правда ли, компетенция ваших продавцов равна бокс-мувингу, стоит очень сильно задуматься,

Ну там же при формировании заказа ИБМ учавствовал, я так понимаю. А продавцы они на то и продавцы, а не тех. специалисты.

Сторвайз не работает без коммутаторов, нужен любой из FC коммутаторов, хотя бы Qlogic 1400 или IBM SAN24B

Это 100% ? Т.е. напрямую сторвайз к HBA подключить нельзя? Об этом где-то написано?

П.С. поставил scientific linux 6.0 (клон редхата 6.0), поставил драйвера последние(8.03.04.12.06.0-k0) с сайта производителя (qlogic), не помогло. Таже поставил QConvergeConsole CLI, вот что там увидел:

Код: Выделить всё

# qaucli
Using config file: /opt/QLogic_Corporation/QConvergeConsoleCLI/qaucli.cfg
Installation directory: /opt/QLogic_Corporation/QConvergeConsoleCLI
Working dir: /root
Scanning QLogic FC HBA(s) and device(s), please wait...

Using config file: /opt/QLogic_Corporation/QConvergeConsoleCLI/iscli.cfg

Using config file: /opt/QLogic_Corporation/QConvergeConsoleCLI/netscli.cfg
Loading CNA Data ...


        QConvergeConsole

        CLI - Version 1.0.0 (Build 64)

    Main Menu

    1:  Adapter Information
    2:  Adapter Configuration
    3:  Adapter Updates
    4:  Adapter Diagnostics
    5:  Adapter Statistics
    6:  Refresh
    7:  Help
    8:  Exit


        Please Enter Selection: 1

        QConvergeConsole

        CLI - Version 1.0.0 (Build 64)

    FC Adapter Information

    1:  FC Adapter Information
    2:  FC Port Information
    3:  FC VPD Information
    4:  FC Target/LUN Information


        (p or 0: Previous Menu; m or 98: Main Menu; ex or 99: Quit)
        Please Enter Selection: 2

        QConvergeConsole

        CLI - Version 1.0.0 (Build 64)

    Adapter Information

    HBA Model QLE2560 SN: RFD1106K99602
      1: Port   1: WWPN: 21-00-00-24-FF-05-84-35 Loop Down
    HBA Model QLE2560 SN: RFD1106M00149
      2: Port   1: WWPN: 21-00-00-24-FF-05-84-4D SFP not installed



        (p or 0: Previous Menu; m or 98: Main Menu; ex or 99: Quit)
        Please Enter Selection: 1
--------------------------------------------------------------------------------
Host Name                      : storwize.burut.org
HBA Instance                   : 1
HBA Model                      : QLE2560
HBA Description                : QLE2560 PCI Express to 8Gb FC Single Channel
HBA ID                         : 1-QLE2560
HBA Alias                      :
HBA Port                       : 1
Port Alias                     :
Node Name                      : 20-00-00-24-FF-05-84-35
Port Name                      : 21-00-00-24-FF-05-84-35
Port ID                        : 00-00-00
Serial Number                  : RFD1106K99602
Driver Version                 : 8.03.04.12.06.0-k0
BIOS Version                   : 3.00
Driver Firmware Version        : 5.03.02 (d5)
Flash BIOS Version             : 3.00
Flash FCode Version            : 3.15
Flash EFI Version              : 2.21
Flash Firmware Version         : 5.04.01
Actual Connection Mode         : Unknown
Actual Data Rate               : Unknown
PortType (Topology)            : Unidentified
Target Count                   : 0
PCI Bus Number                 : 26
PCI Device Number              : 0
PCIe Max Bus Width             : x8
PCIe Max Bus Speed             : 5.0 Gbps
PCIe Negotiated Width          : x4
PCIe Negotiated Speed          : 5.0 Gbps
HBA Status                     : Loop Down
--------------------------------------------------------------------------------

        Hit <Enter> to continue:

        QConvergeConsole

        CLI - Version 1.0.0 (Build 64)

    Adapter Information

    HBA Model QLE2560 SN: RFD1106K99602
      1: Port   1: WWPN: 21-00-00-24-FF-05-84-35 Loop Down
    HBA Model QLE2560 SN: RFD1106M00149
      2: Port   1: WWPN: 21-00-00-24-FF-05-84-4D SFP not installed



        (p or 0: Previous Menu; m or 98: Main Menu; ex or 99: Quit)
        Please Enter Selection: 2
--------------------------------------------------------------------------------
Host Name                      : storwize.burut.org
HBA Instance                   : 0
HBA Model                      : QLE2560
HBA Description                : QLE2560 PCI Express to 8Gb FC Single Channel
HBA ID                         : 0-QLE2560
HBA Alias                      :
HBA Port                       : 1
Port Alias                     :
Node Name                      : 20-00-00-24-FF-05-84-4D
Port Name                      : 21-00-00-24-FF-05-84-4D
Port ID                        : 00-00-00
Serial Number                  : RFD1106M00149
Driver Version                 : 8.03.04.12.06.0-k0
BIOS Version                   : 3.00
Driver Firmware Version        : 5.03.02 (d5)
Flash BIOS Version             : 3.00
Flash FCode Version            : 3.15
Flash EFI Version              : 2.21
Flash Firmware Version         : 5.04.01
Actual Connection Mode         : Unknown
Actual Data Rate               : Unknown
PortType (Topology)            : Unidentified
Target Count                   : 0
PCI Bus Number                 : 21
PCI Device Number              : 0
PCIe Max Bus Width             : x8
PCIe Max Bus Speed             : 5.0 Gbps
PCIe Negotiated Width          : x4
PCIe Negotiated Speed          : 5.0 Gbps
HBA Status                     : SFP not installed
--------------------------------------------------------------------------------

        Hit <Enter> to continue:

Забавно получается, второй контроллер SFP вообще не видит

[metallic]

General SAN configuration rules:

To make best use of the available bandwidth between switches, use ISL trunking (also known as port channels) on all ISLs.
When you use Fibre Channel IP or iSCSI connections, it is best to use jumbo frames in the IP network.
Storwize V7000 supports between 0 and 4 counterpart SANs per system.
High latency links can affect performance. Ensure that you conform to the support statements of the SAN switch vendors and other connected devices regarding the length of Fibre Channel connections in the SAN.

All Fibre Channel devices must be connected through SAN fabrics and must not use direct connections.

The SAN must contain only supported switches, Fibre Channel extenders, and SAN routers. See the following website for specific firmware levels and the latest supported hardware:

Оно?

[metallic]

For Fibre Channel connections, the Storwize V7000 nodes must always be connected to SAN switches only. Each node must be connected to each of the counterpart SANs that are in the redundant fabric. Any Fibre Channel configuration that uses a direct physical connection between a host and a Storwize V7000 node is not supported. When attaching iSCSI hosts to Storwize V7000 nodes, Ethernet switches must be used.

Как я понял, самый простой вариант в моем случае - закупить два свитча и соединить их как показано ниже?



А на хосте надо будет настроить multipath, чтобы к одному волюму иметь доступ по двум подключениям?

[Stranger03]

Ну там же при формировании заказа ИБМ учавствовал, я так понимаю. А продавцы они на то и продавцы, а не тех. специалисты.

Ребята в ИБМ как правило обладают этой информацией. А продавцы тем более обязаны. Мы же знаем.

[Stranger03]

Как я понял, самый простой вариант в моем случае - закупить два свитча и соединить их как показано ниже?

На худой конец можно и один использовать.

[metallic]

Как я понял, самый простой вариант в моем случае - закупить два свитча и соединить их как показано ниже?

На худой конец можно и один использовать.

На худой конец да, но тогда возникает вопрос: зачем нам двухконтроллерная голова и два HBA в сервере?

[Stranger03]

На худой конец да, но тогда возникает вопрос: зачем нам двухконтроллерная голова и два HBA в сервере?

Одноконтроллерной головы Сторвайза не существует, а зачем вам по 2-а ХБА в серверах...., наверное для отказоустойчивости.

[Ziggy Stardust]

Как я понял, самый простой вариант в моем случае - закупить два свитча и соединить их как показано ниже?



А на хосте надо будет настроить multipath, чтобы к одному волюму иметь доступ по двум подключениям?

Рекомендованная ИБМом схема подключения такова:

- две SAN фабрики (минимум по одному коммутатору в каждой)
- v7000 подключается в SAN каждым контроллером в каждую фабрику (т.е. у каждого конторллера минимум один порт в одну фабрику, второй - в другую, если планируется задействовать виртуализацию стораджей, то лучше все 4 порта на контроллерах подключать)
- сервера так же подключаются минимум одной ХБА в одну фабрику, второй в другую
- на обоих фабриках нужно соответствующим образом прописать зонирование (есть в редбуке)
- на серверах надо установить драйвера для поддержки мультипасинга (SDD DSM)

Коммутаторы следует выбирать из списка совместимых:

https://www-304.ibm.com/support/docview ... #_Switches

[metallic]

На худой конец да, но тогда возникает вопрос: зачем нам двухконтроллерная голова и два HBA в сервере?

Одноконтроллерной головы Сторвайза не существует, а зачем вам по 2-а ХБА в серверах...., наверное для отказоустойчивости.

Ну о чем я и говорю, что для отказоустойчивости надо два HBA и два свитча

- на обоих фабриках нужно соответствующим образом прописать зонирование (есть в редбуке)

Это в документации к свитчу смотреть или к сторвайзу?

[Stranger03]

Это в документации к свитчу смотреть или к сторвайзу?

Саша же написал, в редбуках, в документации по Сторвайзу и организации SAN сети.
http://www.redbooks.ibm.com/?lnk=mhsd

[metallic]

Это в документации к свитчу смотреть или к сторвайзу?

Саша же написал, в редбуках, в документации по Сторвайзу и организации SAN сети.
http://www.redbooks.ibm.com/?lnk=mhsd

Понятно, спасибо, я просто не знал что это за ребдука

А случайно не подскажете, где можно почитать теорию по САН сетям, чтобы понятно обо всех основных моментах, что там за группы, зонирование и т.д.