настройки ServeRAID-MR10i на сервере IBM 3650M2

Конфигурирование, планирование RAID систем, возможности, технологии, теория. Qlogic, LSI Logic, Adaptec ...

Модераторы: Trinity admin`s, Free-lance moderator`s

Ответить
Docdeath
Junior member
Сообщения: 8
Зарегистрирован: 11 янв 2010, 08:13
Откуда: Краснодар

настройки ServeRAID-MR10i на сервере IBM 3650M2

Сообщение Docdeath » 11 янв 2010, 14:49

Здраствуйте!
Сервер такой конфигурации: IBM x3650M2, контроллер ServeRAID-MR10i (1.40.52-0629).
HDD 2x73Gb (Raid 1) и 4x300Gb (Raid 10)
Провелось три тестирования Raid 10 с использованием программы Iometer
1 вариант: strip 128kb, Write - Always WriteBack, DriveCache - Disable, I/O - Direct
смотрим файл results_always_writeback.txt

2 вариант: strip 128kb, Write - WriteBack with BBU, DriveCache - Disable, I/O - Drect
смотрим results_writeback_with_bbu.txt

3 вариант: strip 128kb, Write - WriteThrough, DriveCache - Disable, I/O - Direct
смотрим results_write_through.txt

Результат трех тестирований ничем не отличается друг от друга, на другом сервере IBM (чужом) при включенном WriteBack with BBU скорость существенно возросла. В чем может быть проблема?
Вложения
results_write_through.txt
(9.43 КБ) 742 скачивания
results_writeback_with_bbu.txt
(13.47 КБ) 690 скачиваний
results_always_writeback.txt
(9.44 КБ) 680 скачиваний

Аватара пользователя
exLH
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 5061
Зарегистрирован: 11 фев 2004, 15:49
Откуда: Москва
Контактная информация:

Re: настройки ServeRAID-MR10i на сервере IBM 3650M2

Сообщение exLH » 11 янв 2010, 15:02

Docdeath писал(а):1 вариант: strip 128kb, Write - Always WriteBack, DriveCache - Disable, I/O - Direct
2 вариант: strip 128kb, Write - WriteBack with BBU, DriveCache - Disable, I/O - Drect
При "живой" батарейке эти результаты отличаться не должны никак.

Какой размер диска (или файла, если тестировался диск с файловой системой), сколько Outstanding IOs ?
Почтовый адрес для связи: a.ivanov@trinitygroup.ru | ICQ: 112586598

Docdeath
Junior member
Сообщения: 8
Зарегистрирован: 11 янв 2010, 08:13
Откуда: Краснодар

Re: настройки ServeRAID-MR10i на сервере IBM 3650M2

Сообщение Docdeath » 11 янв 2010, 15:12

Сорри, привел текущую конфу по серверу (после закупки жеских дисков), тесты проводились на такой конфигурации: 4х73Gb (RAID 10), разбит на два LUN: первый (5гигов) система, на втором (130гигов, неотформатированных) проводилось тестирование.
тест по времени 5 минут и Outstanding IOs - 100

Аватара пользователя
exLH
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 5061
Зарегистрирован: 11 фев 2004, 15:49
Откуда: Москва
Контактная информация:

Re: настройки ServeRAID-MR10i на сервере IBM 3650M2

Сообщение exLH » 11 янв 2010, 15:32

В таком случае - странно, нужно смотреть на статус контроллера.
Кстати, прошивку имеет смысл обновить...
Почтовый адрес для связи: a.ivanov@trinitygroup.ru | ICQ: 112586598

Docdeath
Junior member
Сообщения: 8
Зарегистрирован: 11 янв 2010, 08:13
Откуда: Краснодар

Re: настройки ServeRAID-MR10i на сервере IBM 3650M2

Сообщение Docdeath » 13 янв 2010, 13:20

Провелись новые тесты
Сервер такой конфигурации: IBM x3650M2, контроллер ServeRAID-MR10i (1.40.92-0746), обновили прошивку.
HDD 2x73Gb (Raid 1) и 4x300Gb (Raid 10)
Протестировали с WriteThrough и различные режимы с Always WriteBack.
Пока максимальная разница между этими двумя режимами в 90 IOps.
С WriteThrough 547 IOps
C Always WriteBack 637 IOps

Такая разница исходя из Вашего это нормально или надо искать дальше в чем может быть проблема?

Аватара пользователя
exLH
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 5061
Зарегистрирован: 11 фев 2004, 15:49
Откуда: Москва
Контактная информация:

Re: настройки ServeRAID-MR10i на сервере IBM 3650M2

Сообщение exLH » 13 янв 2010, 13:38

А вот это уже похоже на правду.
С чего бы разнице быть больше?
Почтовый адрес для связи: a.ivanov@trinitygroup.ru | ICQ: 112586598

Docdeath
Junior member
Сообщения: 8
Зарегистрирован: 11 янв 2010, 08:13
Откуда: Краснодар

Re: настройки ServeRAID-MR10i на сервере IBM 3650M2

Сообщение Docdeath » 13 янв 2010, 13:52

Просто исходя из наших тестов суммарная скорость чтения получается 26.5MBps, а суммарная скорость записи 13MBps (по всем 8 тестируемым ядрам).

Не маленькая ли эта скорость для сервера с данной конфигурацией?

Аватара пользователя
exLH
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 5061
Зарегистрирован: 11 фев 2004, 15:49
Откуда: Москва
Контактная информация:

Re: настройки ServeRAID-MR10i на сервере IBM 3650M2

Сообщение exLH » 13 янв 2010, 14:23

Docdeath писал(а):Просто исходя из наших тестов суммарная скорость чтения получается 26.5MBps, а суммарная скорость записи 13MBps (по всем 8 тестируемым ядрам).
Что значит "из наших тестов"? Как тестировали? И при чем тут число ядер?
Почтовый адрес для связи: a.ivanov@trinitygroup.ru | ICQ: 112586598

Docdeath
Junior member
Сообщения: 8
Зарегистрирован: 11 янв 2010, 08:13
Откуда: Краснодар

Re: настройки ServeRAID-MR10i на сервере IBM 3650M2

Сообщение Docdeath » 13 янв 2010, 14:33

меряли программой IOmeter, неотформатированный раздел 300Gb (RAID 10), время теста 5 минут, блоком 64к, для каждого ядра одинаковые Pattern(65536,100,67,100,0,1,0,0), Outstanding IOs - 100.
Соответственно данные привели суммарно по всем ядрам
Отдельно по каждому результаты еще меньше

Аватара пользователя
exLH
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 5061
Зарегистрирован: 11 фев 2004, 15:49
Откуда: Москва
Контактная информация:

Re: настройки ServeRAID-MR10i на сервере IBM 3650M2

Сообщение exLH » 13 янв 2010, 15:57

Docdeath писал(а):блоком 64к, для каждого ядра одинаковые Pattern(65536,100,67,100,0,1,0,0), Outstanding IOs - 100
Замечательно.
А можете сформулировать словами, какую нагрузку Вы хотели таким тестом воспроизвести?
И почему Вам кажется, что результаты неудовлетворительные?
Почтовый адрес для связи: a.ivanov@trinitygroup.ru | ICQ: 112586598

Docdeath
Junior member
Сообщения: 8
Зарегистрирован: 11 янв 2010, 08:13
Откуда: Краснодар

Re: настройки ServeRAID-MR10i на сервере IBM 3650M2

Сообщение Docdeath » 14 янв 2010, 09:06

Нагрузка - биллинговая система, сбор и парсер Netflow на сервере.
Результаты кажутся неудовлетворительными в связи с тем что есть данные по тестированию другого IBM сервера примерно такой же конфы и на том сервере при включении кэша данныые IOps увеличились в 4 раза.
Видимо при том тестировании произошла какая то ошибка, тесты буду проведены заного.

Поискали результатам тестирование такого сервера в интернете значения такие как у нас в тестах, скорее всего тему можно закрывать.

Аватара пользователя
exLH
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 5061
Зарегистрирован: 11 фев 2004, 15:49
Откуда: Москва
Контактная информация:

Re: настройки ServeRAID-MR10i на сервере IBM 3650M2

Сообщение exLH » 14 янв 2010, 09:52

Docdeath писал(а):Нагрузка - биллинговая система, сбор и парсер Netflow на сервере.
А на основе каких данных было решение тестировать вот так:
Docdeath писал(а):блоком 64к, для каждого ядра одинаковые Pattern(65536,100,67,100,0,1,0,0), Outstanding IOs - 100
?
Почтовый адрес для связи: a.ivanov@trinitygroup.ru | ICQ: 112586598

Docdeath
Junior member
Сообщения: 8
Зарегистрирован: 11 янв 2010, 08:13
Откуда: Краснодар

Re: настройки ServeRAID-MR10i на сервере IBM 3650M2

Сообщение Docdeath » 14 янв 2010, 10:18

Был выбрал дефолтный Pattern.
Задача была выяснить разницу между выключенным и включенным кэшем.
А если у Вас есть рациональные предложения, предложите их пожалуйста.

Аватара пользователя
exLH
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 5061
Зарегистрирован: 11 фев 2004, 15:49
Откуда: Москва
Контактная информация:

Re: настройки ServeRAID-MR10i на сервере IBM 3650M2

Сообщение exLH » 14 янв 2010, 11:52

Docdeath писал(а):Был выбрал дефолтный Pattern.
Вот я и спрашиваю: исходя из каких соображений был выбран именно такой pattern и какую нагрузку Вы пытались таким pattern'ом эмулировать?
Docdeath писал(а):Задача была выяснить разницу между выключенным и включенным кэшем.
Разница будет разной на разных нагрузках. При Вашем способе тестирования она будет минимальной.
Docdeath писал(а):А если у Вас есть рациональные предложения, предложите их пожалуйста.
Если интересует результат, то тестировать надо на Вашем приложении и рабочих данных.
Если хочется тестировать на кошках, а не на боевой системе, то нужно сначала
а) понять, как работают с дисками Ваши приложения (каждое) в плане размера блоков, частоты обращения, соотношения чтение/запись, каков процент последовательных запросов
б) понять, с каким объемом данных работает каждое приложение
в) составить соответствующие модели в Iometer
г) проверить, что модели отражают реальное положение дел (на рабочей системе)
д) начинать тестировать другое железо
А если начинать сразу с пункта (д), то никакого толка от таких тестов нет (по крайней мере в приложении к реальным задачам).
Почтовый адрес для связи: a.ivanov@trinitygroup.ru | ICQ: 112586598

Docdeath
Junior member
Сообщения: 8
Зарегистрирован: 11 янв 2010, 08:13
Откуда: Краснодар

Re: настройки ServeRAID-MR10i на сервере IBM 3650M2

Сообщение Docdeath » 14 янв 2010, 12:10

Понятно, спасибо.

Ответить

Вернуться в «Массивы - RAID технологии.»

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 27 гостей