Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медленно

У вас сложности? Наши специалисты постараются помочь вам. Если вы сами сталкивались с похожими проблемами - поделитесь опытом.

Модераторы: Trinity admin`s, Free-lance moderator`s

MaTpockuH-koT
member
Сообщения: 21
Зарегистрирован: 08 май 2014, 15:06
Откуда: Зеленоград

Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медленно

Сообщение MaTpockuH-koT » 14 июл 2014, 16:16

Здравствуйте!
Небольшая предыстория.
Появился у меня сервер (конфиг ниже), только с контроллером Adaptec ASR-6805E. И возникли проблемы с отключением Storage в ESXi. Связывался с техподом VMware и Adaptec, решения пока нет, говорят скоро будет, как напишут новый драйвер.
Пока суть да дело, решил купить простенький контроллер от LSI (модель в конфигурации). Установил в пятницу ближе к концу дня, сконфигурил RAID10 из шести дисков, и отбыл на выходные.
Первое недоумение у меня вызвало созерцание в понедельник утром (сегодня) Initialize 98%. Думал что зависло, но нет, через пару часов закончилось. Т.е. инициализация длилась около 2,5 суток... Подозрительно долго как-то.

Загрузил и гипервизор и понеслось... Пытаюсь скопировать на контроллер что-нибудь и в общем и целом скорость копирования колеблется в пределах 15-20 Мб/сек. Бывают всплески, но не более.
Прошивка и биос обновлены на самые последние.
Чутьём понимаю, что где-то надо изменить настройку какую-то, но вот где?
Документация на контроллер какая-то совсем примитивная, описано как создать RAID 1, 0, 10 и всё.
Полазил сам по настройкам (тоже весьма ограниченным), ничего особенного не нашёл.
Если кто поможет советом, буду признателен
Заранее спасибо

Конфиг:
Supermicro X9DRi-F Rev. 1.11A Гипервизором определяется как X9DR3-F
Xeon E5-2609 V2 x 2
Samsung M939B2G70QH0-CK0/16G 16Gb 2Rx4 PC3-12800R-11-1 2-E2-03 x 4
LSI Logic SAS9211-8i SGL PCI-E, 6Gb/s SAS, 8-port Host Bus Adapter (LSI00194)
HGST HUS724020ALS640 2Tb x 6
SAS743TQ Rev 3.00
PWS-920P-1R x 2

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен

Сообщение gs » 14 июл 2014, 16:19

Это очень примитивный контроллер - по сути HBA с зачатками рэйдовости.
Кэша у него нету. Возможно, отключен кэш самих винтов?

MaTpockuH-koT
member
Сообщения: 21
Зарегистрирован: 08 май 2014, 15:06
Откуда: Зеленоград

Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен

Сообщение MaTpockuH-koT » 14 июл 2014, 16:33

gs писал(а):Возможно, отключен кэш самих винтов?
В настройках 6805 была такая настройка, здесь не нашёл. Не подскажете, где посмотреть?

KAI
Advanced member
Сообщения: 450
Зарегистрирован: 10 окт 2006, 18:35
Откуда: Киев
Контактная информация:

Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен

Сообщение KAI » 14 июл 2014, 17:19

В какой слот вставлен HBA?
Свежий драйвер для LSI пробовали?
Прошивка HBA тоже последняя (P19)?

KAI
Advanced member
Сообщения: 450
Зарегистрирован: 10 окт 2006, 18:35
Откуда: Киев
Контактная информация:

Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен

Сообщение KAI » 14 июл 2014, 17:20

MaTpockuH-koT писал(а):
gs писал(а):Возможно, отключен кэш самих винтов?
В настройках 6805 была такая настройка, здесь не нашёл. Не подскажете, где посмотреть?
Нет в этом контроллере такого

MaTpockuH-koT
member
Сообщения: 21
Зарегистрирован: 08 май 2014, 15:06
Откуда: Зеленоград

Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен

Сообщение MaTpockuH-koT » 15 июл 2014, 10:26

KAI писал(а):В какой слот вставлен HBA?
Пробовал в разные, разницы нет
KAI писал(а):Свежий драйвер для LSI пробовали?
Да, конечно.

Код: Выделить всё

~ # esxcli software vib list
Name                           Version                               Vendor  Acceptance Level  Install Date
-----------------------------  ------------------------------------  ------  ----------------  ------------
scsi-mpt2sas                   16.00.00.00.1vmw-1OEM.500.0.0.472560  LSI     VMwareCertified   2014-07-15
KAI писал(а):Прошивка HBA тоже последняя (P19)?
Само-собой.

И наверное, я зря сильно грешу на контроллер.
До этого я копировал на него из вне, а тут решил в пределах массива. И показал он скорости хоть и не запредельные, но гораздо лучше. Оцените на графике.
Потестирую ещё, отпишусь
Вложения
speed.jpg
IMG_15072014_090452.jpg

MaTpockuH-koT
member
Сообщения: 21
Зарегистрирован: 08 май 2014, 15:06
Откуда: Зеленоград

Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен

Сообщение MaTpockuH-koT » 15 июл 2014, 15:37

Вопросик в аудиторию
Гипотетически продавец может пойти на уступки обменять контроллер.
Что скажете про такой:
Контроллер LSI Logic SAS9260CV-4I SGL 512Mb PCI-E, 4-port 6Gb/s, CacheVault, SAS/SATA RAID Adapter (LSI00280)
Количество портов
4
Скорость передачи
6 Гбит/с
Основной интерфейс
PCI Express версии 2.0 x8
Уровни RAID
0, 1, 5, 10, 50, 60
Количество поддерживаемых приводов
128
Установленная память
512 МБ
Внутренний разъем
1 x SFF8087 Mini-SAS
Опция защиты кэш-памяти
CacheVault

Портов меньше, ну да и фиг с ними

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен

Сообщение gs » 15 июл 2014, 15:44

Если портов хватает, то это даже более ценный мех (кондер для защиты кэша есть).

KAI
Advanced member
Сообщения: 450
Зарегистрирован: 10 окт 2006, 18:35
Откуда: Киев
Контактная информация:

Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен

Сообщение KAI » 15 июл 2014, 16:52

Как то я сразу пропустил то что у Вас стоят Hitachi. У меня с ними тоже трабл. Сменил на Seagate - все Ok. Есть возможность проверить?

PS Драйвер сетевух тоже обновлен?

MaTpockuH-koT
member
Сообщения: 21
Зарегистрирован: 08 май 2014, 15:06
Откуда: Зеленоград

Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен

Сообщение MaTpockuH-koT » 16 июл 2014, 08:01

gs писал(а):Если портов хватает, то это даже более ценный мех (кондер для защиты кэша есть).
Ок, тогда буду давить на жалость, попробую обменять
KAI писал(а):Как то я сразу пропустил то что у Вас стоят Hitachi. У меня с ними тоже трабл. Сменил на Seagate - все Ok. Есть возможность проверить?
Есть такая возможность. Сейчас займусь.
KAI писал(а):PS Драйвер сетевух тоже обновлен?
Нет, это я не обновлял.
В предистории всё было выстро, поэтому я сейчас только на околоконтроллерной теме замкнулся, ибо поменялся только он. Если не затруднит, не поделитесь ссылкой?

KAI
Advanced member
Сообщения: 450
Зарегистрирован: 10 окт 2006, 18:35
Откуда: Киев
Контактная информация:

Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен

Сообщение KAI » 16 июл 2014, 08:47

поделитесь ссылкой
https://my.vmware.com/web/vmware/detail ... ductId=353

Как вариант можете попробовать дистрибутив с уже интегрированными драйверами.
http://onix.kiev.ua/download/vmware/ESX ... EM_v04.iso

MaTpockuH-koT
member
Сообщения: 21
Зарегистрирован: 08 май 2014, 15:06
Откуда: Зеленоград

Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен

Сообщение MaTpockuH-koT » 17 июл 2014, 12:26

Обновление драйвера сетёвки и замена винтов не помогли.
Продаван не захотел менять контроллер

В общем, решил я сегодня потестировать примитивным способом, копируя файлик в 40 Гб.
Создал "песочницу" из двух хостов, NAS и всё это на отдельном гигабитном свитче, дабы исключить стороннее воздействие.

Один из хостов мой многострадальный, другой старый проверенный
На хосте помимо рэйд-массива подключен к материнке SATA-диск
Ну значит приступил к копированию
RAID -> NAS - 104 Mb/s
RAID -> DISK - 126 Mb/s
NAS -> RAID - 11 Mb/s
NAS -> DISK - 40 Mb/s
DISK -> RAID - 110 Mb/s

Дабы убедиться, что с NAS проблем нет, проверил так же копирование на другой хост. Проблем нет, практически гигабит.

Стало быть где-то в сетёвке? И копирование с диска на рэйд удивило. Буквально вчера, всё, что копировал на рэйд "извне" выдавало скорости около 13-15 Mb/s, а сегодня как будто всё нормально...

Попробую наверное воткнуть обратно адаптек и на других винтах потестю (чтобы этот массив не ломать).

А вообще замутка та ещё получилась :green:

KAI
Advanced member
Сообщения: 450
Зарегистрирован: 10 окт 2006, 18:35
Откуда: Киев
Контактная информация:

Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен

Сообщение KAI » 17 июл 2014, 17:37

может вообще дело в патчкорде?

Вот еще вопрос : LSI SMI-S provider не стоит?

MaTpockuH-koT
member
Сообщения: 21
Зарегистрирован: 08 май 2014, 15:06
Откуда: Зеленоград

Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен

Сообщение MaTpockuH-koT » 18 июл 2014, 09:45

KAI писал(а):может вообще дело в патчкорде?
Нет, не в нём дело. Поменял, ничего не изменилось.
KAI писал(а):Вот еще вопрос : LSI SMI-S provider не стоит?
А под VMware нету :(
http://www.lsi.com/products/host-bus-ad ... x#tab/tab4

KAI
Advanced member
Сообщения: 450
Зарегистрирован: 10 окт 2006, 18:35
Откуда: Киев
Контактная информация:

Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен

Сообщение KAI » 18 июл 2014, 10:58

А под VMware нету
На самом деле есть для 2108 и 2208, но он работает и с HBA. Но подглючивает
вот пример
https://communities.vmware.com/message/2392393

Ответить

Вернуться в «Серверы - Решение проблем»

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 18 гостей