Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медленно
Модераторы: Trinity admin`s, Free-lance moderator`s
-
- member
- Сообщения: 21
- Зарегистрирован: 08 май 2014, 15:06
- Откуда: Зеленоград
Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медленно
Здравствуйте!
Небольшая предыстория.
Появился у меня сервер (конфиг ниже), только с контроллером Adaptec ASR-6805E. И возникли проблемы с отключением Storage в ESXi. Связывался с техподом VMware и Adaptec, решения пока нет, говорят скоро будет, как напишут новый драйвер.
Пока суть да дело, решил купить простенький контроллер от LSI (модель в конфигурации). Установил в пятницу ближе к концу дня, сконфигурил RAID10 из шести дисков, и отбыл на выходные.
Первое недоумение у меня вызвало созерцание в понедельник утром (сегодня) Initialize 98%. Думал что зависло, но нет, через пару часов закончилось. Т.е. инициализация длилась около 2,5 суток... Подозрительно долго как-то.
Загрузил и гипервизор и понеслось... Пытаюсь скопировать на контроллер что-нибудь и в общем и целом скорость копирования колеблется в пределах 15-20 Мб/сек. Бывают всплески, но не более.
Прошивка и биос обновлены на самые последние.
Чутьём понимаю, что где-то надо изменить настройку какую-то, но вот где?
Документация на контроллер какая-то совсем примитивная, описано как создать RAID 1, 0, 10 и всё.
Полазил сам по настройкам (тоже весьма ограниченным), ничего особенного не нашёл.
Если кто поможет советом, буду признателен
Заранее спасибо
Конфиг:
Supermicro X9DRi-F Rev. 1.11A Гипервизором определяется как X9DR3-F
Xeon E5-2609 V2 x 2
Samsung M939B2G70QH0-CK0/16G 16Gb 2Rx4 PC3-12800R-11-1 2-E2-03 x 4
LSI Logic SAS9211-8i SGL PCI-E, 6Gb/s SAS, 8-port Host Bus Adapter (LSI00194)
HGST HUS724020ALS640 2Tb x 6
SAS743TQ Rev 3.00
PWS-920P-1R x 2
Небольшая предыстория.
Появился у меня сервер (конфиг ниже), только с контроллером Adaptec ASR-6805E. И возникли проблемы с отключением Storage в ESXi. Связывался с техподом VMware и Adaptec, решения пока нет, говорят скоро будет, как напишут новый драйвер.
Пока суть да дело, решил купить простенький контроллер от LSI (модель в конфигурации). Установил в пятницу ближе к концу дня, сконфигурил RAID10 из шести дисков, и отбыл на выходные.
Первое недоумение у меня вызвало созерцание в понедельник утром (сегодня) Initialize 98%. Думал что зависло, но нет, через пару часов закончилось. Т.е. инициализация длилась около 2,5 суток... Подозрительно долго как-то.
Загрузил и гипервизор и понеслось... Пытаюсь скопировать на контроллер что-нибудь и в общем и целом скорость копирования колеблется в пределах 15-20 Мб/сек. Бывают всплески, но не более.
Прошивка и биос обновлены на самые последние.
Чутьём понимаю, что где-то надо изменить настройку какую-то, но вот где?
Документация на контроллер какая-то совсем примитивная, описано как создать RAID 1, 0, 10 и всё.
Полазил сам по настройкам (тоже весьма ограниченным), ничего особенного не нашёл.
Если кто поможет советом, буду признателен
Заранее спасибо
Конфиг:
Supermicro X9DRi-F Rev. 1.11A Гипервизором определяется как X9DR3-F
Xeon E5-2609 V2 x 2
Samsung M939B2G70QH0-CK0/16G 16Gb 2Rx4 PC3-12800R-11-1 2-E2-03 x 4
LSI Logic SAS9211-8i SGL PCI-E, 6Gb/s SAS, 8-port Host Bus Adapter (LSI00194)
HGST HUS724020ALS640 2Tb x 6
SAS743TQ Rev 3.00
PWS-920P-1R x 2
- gs
- Сотрудник Тринити
- Сообщения: 16650
- Зарегистрирован: 23 авг 2002, 17:34
- Откуда: Москва
- Контактная информация:
Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен
Это очень примитивный контроллер - по сути HBA с зачатками рэйдовости.
Кэша у него нету. Возможно, отключен кэш самих винтов?
Кэша у него нету. Возможно, отключен кэш самих винтов?
-
- member
- Сообщения: 21
- Зарегистрирован: 08 май 2014, 15:06
- Откуда: Зеленоград
Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен
В настройках 6805 была такая настройка, здесь не нашёл. Не подскажете, где посмотреть?gs писал(а):Возможно, отключен кэш самих винтов?
-
- Advanced member
- Сообщения: 450
- Зарегистрирован: 10 окт 2006, 18:35
- Откуда: Киев
- Контактная информация:
Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен
В какой слот вставлен HBA?
Свежий драйвер для LSI пробовали?
Прошивка HBA тоже последняя (P19)?
Свежий драйвер для LSI пробовали?
Прошивка HBA тоже последняя (P19)?
-
- Advanced member
- Сообщения: 450
- Зарегистрирован: 10 окт 2006, 18:35
- Откуда: Киев
- Контактная информация:
Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен
Нет в этом контроллере такогоMaTpockuH-koT писал(а):В настройках 6805 была такая настройка, здесь не нашёл. Не подскажете, где посмотреть?gs писал(а):Возможно, отключен кэш самих винтов?
-
- member
- Сообщения: 21
- Зарегистрирован: 08 май 2014, 15:06
- Откуда: Зеленоград
Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен
Пробовал в разные, разницы нетKAI писал(а):В какой слот вставлен HBA?
Да, конечно.KAI писал(а):Свежий драйвер для LSI пробовали?
Код: Выделить всё
~ # esxcli software vib list
Name Version Vendor Acceptance Level Install Date
----------------------------- ------------------------------------ ------ ---------------- ------------
scsi-mpt2sas 16.00.00.00.1vmw-1OEM.500.0.0.472560 LSI VMwareCertified 2014-07-15
Само-собой.KAI писал(а):Прошивка HBA тоже последняя (P19)?
И наверное, я зря сильно грешу на контроллер.
До этого я копировал на него из вне, а тут решил в пределах массива. И показал он скорости хоть и не запредельные, но гораздо лучше. Оцените на графике.
Потестирую ещё, отпишусь
-
- member
- Сообщения: 21
- Зарегистрирован: 08 май 2014, 15:06
- Откуда: Зеленоград
Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен
Вопросик в аудиторию
Гипотетически продавец может пойти на уступки обменять контроллер.
Что скажете про такой:
Контроллер LSI Logic SAS9260CV-4I SGL 512Mb PCI-E, 4-port 6Gb/s, CacheVault, SAS/SATA RAID Adapter (LSI00280)
Количество портов
4
Скорость передачи
6 Гбит/с
Основной интерфейс
PCI Express версии 2.0 x8
Уровни RAID
0, 1, 5, 10, 50, 60
Количество поддерживаемых приводов
128
Установленная память
512 МБ
Внутренний разъем
1 x SFF8087 Mini-SAS
Опция защиты кэш-памяти
CacheVault
Портов меньше, ну да и фиг с ними
Гипотетически продавец может пойти на уступки обменять контроллер.
Что скажете про такой:
Контроллер LSI Logic SAS9260CV-4I SGL 512Mb PCI-E, 4-port 6Gb/s, CacheVault, SAS/SATA RAID Adapter (LSI00280)
Количество портов
4
Скорость передачи
6 Гбит/с
Основной интерфейс
PCI Express версии 2.0 x8
Уровни RAID
0, 1, 5, 10, 50, 60
Количество поддерживаемых приводов
128
Установленная память
512 МБ
Внутренний разъем
1 x SFF8087 Mini-SAS
Опция защиты кэш-памяти
CacheVault
Портов меньше, ну да и фиг с ними
- gs
- Сотрудник Тринити
- Сообщения: 16650
- Зарегистрирован: 23 авг 2002, 17:34
- Откуда: Москва
- Контактная информация:
Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен
Если портов хватает, то это даже более ценный мех (кондер для защиты кэша есть).
-
- Advanced member
- Сообщения: 450
- Зарегистрирован: 10 окт 2006, 18:35
- Откуда: Киев
- Контактная информация:
Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен
Как то я сразу пропустил то что у Вас стоят Hitachi. У меня с ними тоже трабл. Сменил на Seagate - все Ok. Есть возможность проверить?
PS Драйвер сетевух тоже обновлен?
PS Драйвер сетевух тоже обновлен?
-
- member
- Сообщения: 21
- Зарегистрирован: 08 май 2014, 15:06
- Откуда: Зеленоград
Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен
Ок, тогда буду давить на жалость, попробую обменятьgs писал(а):Если портов хватает, то это даже более ценный мех (кондер для защиты кэша есть).
Есть такая возможность. Сейчас займусь.KAI писал(а):Как то я сразу пропустил то что у Вас стоят Hitachi. У меня с ними тоже трабл. Сменил на Seagate - все Ok. Есть возможность проверить?
Нет, это я не обновлял.KAI писал(а):PS Драйвер сетевух тоже обновлен?
В предистории всё было выстро, поэтому я сейчас только на околоконтроллерной теме замкнулся, ибо поменялся только он. Если не затруднит, не поделитесь ссылкой?
-
- Advanced member
- Сообщения: 450
- Зарегистрирован: 10 окт 2006, 18:35
- Откуда: Киев
- Контактная информация:
Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен
https://my.vmware.com/web/vmware/detail ... ductId=353поделитесь ссылкой
Как вариант можете попробовать дистрибутив с уже интегрированными драйверами.
http://onix.kiev.ua/download/vmware/ESX ... EM_v04.iso
-
- member
- Сообщения: 21
- Зарегистрирован: 08 май 2014, 15:06
- Откуда: Зеленоград
Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен
Обновление драйвера сетёвки и замена винтов не помогли.
Продаван не захотел менять контроллер
В общем, решил я сегодня потестировать примитивным способом, копируя файлик в 40 Гб.
Создал "песочницу" из двух хостов, NAS и всё это на отдельном гигабитном свитче, дабы исключить стороннее воздействие.
Один из хостов мой многострадальный, другой старый проверенный
На хосте помимо рэйд-массива подключен к материнке SATA-диск
Ну значит приступил к копированию
RAID -> NAS - 104 Mb/s
RAID -> DISK - 126 Mb/s
NAS -> RAID - 11 Mb/s
NAS -> DISK - 40 Mb/s
DISK -> RAID - 110 Mb/s
Дабы убедиться, что с NAS проблем нет, проверил так же копирование на другой хост. Проблем нет, практически гигабит.
Стало быть где-то в сетёвке? И копирование с диска на рэйд удивило. Буквально вчера, всё, что копировал на рэйд "извне" выдавало скорости около 13-15 Mb/s, а сегодня как будто всё нормально...
Попробую наверное воткнуть обратно адаптек и на других винтах потестю (чтобы этот массив не ломать).
А вообще замутка та ещё получилась
Продаван не захотел менять контроллер
В общем, решил я сегодня потестировать примитивным способом, копируя файлик в 40 Гб.
Создал "песочницу" из двух хостов, NAS и всё это на отдельном гигабитном свитче, дабы исключить стороннее воздействие.
Один из хостов мой многострадальный, другой старый проверенный
На хосте помимо рэйд-массива подключен к материнке SATA-диск
Ну значит приступил к копированию
RAID -> NAS - 104 Mb/s
RAID -> DISK - 126 Mb/s
NAS -> RAID - 11 Mb/s
NAS -> DISK - 40 Mb/s
DISK -> RAID - 110 Mb/s
Дабы убедиться, что с NAS проблем нет, проверил так же копирование на другой хост. Проблем нет, практически гигабит.
Стало быть где-то в сетёвке? И копирование с диска на рэйд удивило. Буквально вчера, всё, что копировал на рэйд "извне" выдавало скорости около 13-15 Mb/s, а сегодня как будто всё нормально...
Попробую наверное воткнуть обратно адаптек и на других винтах потестю (чтобы этот массив не ломать).
А вообще замутка та ещё получилась
-
- Advanced member
- Сообщения: 450
- Зарегистрирован: 10 окт 2006, 18:35
- Откуда: Киев
- Контактная информация:
Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен
может вообще дело в патчкорде?
Вот еще вопрос : LSI SMI-S provider не стоит?
Вот еще вопрос : LSI SMI-S provider не стоит?
-
- member
- Сообщения: 21
- Зарегистрирован: 08 май 2014, 15:06
- Откуда: Зеленоград
Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен
Нет, не в нём дело. Поменял, ничего не изменилось.KAI писал(а):может вообще дело в патчкорде?
А под VMware нетуKAI писал(а):Вот еще вопрос : LSI SMI-S provider не стоит?
http://www.lsi.com/products/host-bus-ad ... x#tab/tab4
-
- Advanced member
- Сообщения: 450
- Зарегистрирован: 10 окт 2006, 18:35
- Откуда: Киев
- Контактная информация:
Re: Supermicro X9DR3-F и LSI Logic SAS9211-8i - очень медлен
На самом деле есть для 2108 и 2208, но он работает и с HBA. Но подглючиваетА под VMware нету
вот пример
https://communities.vmware.com/message/2392393
Кто сейчас на конференции
Сейчас этот форум просматривают: нет зарегистрированных пользователей и 18 гостей