Помогите понять результаты замеров СХД
Модераторы: Trinity admin`s, Free-lance moderator`s
Помогите понять результаты замеров СХД
Приветствую всех.
Товарищи, я не особый спец по теме, и очень надеюсь на вашу помощь.
Тема такая. Замеряю IOPs-ы и хочу узнать, сколько иопсов может дать сторедж из 6 дисков sata (7200), RAID-5:
Теория показывает что:
6 (HDD 7200 шт.) * 80 IOPs (с диска. для примера) = 480 IOPs в сумме
И при вариантах:
Вариант 1 - Запись 80% Чтение 20% = 192 IOPs
Вариант 2 - Запись 20% Чтение 80% = 408 IOPs
А теперь практика:
Есть виртуальная машина (ОС windows) с подмаунченным диском 1TB.
на этой виртуалке стоит iometer который будет писать/читать, одним воркером, весь диск в 1TB.
В итоге получаю такие цифирьки
как видим что не дотягиваем до значений теории (см. выше)
А теперь покажу результаты тех же замеров (параметры иометра идентичны виртуалке) но уже своего десктопа с двумя дисками один из которых на 2TB:
Если я все правильно понимаю:
То мой десктоп дает на
W80Random100 - 85,7 IOps | 17,0 Read IOps | 68,6 Write IOps
А СХД (рейд из 6 дисков)
W80Random100 - 81,2 IOps | 16,1 Read IOps | 65,1 Write IOps
А вот тут таки вопрос - КАК ТАК?
Где те теоритические 192 иопса?
Где я не прав товарищи?
Заранее благодартвую.
Товарищи, я не особый спец по теме, и очень надеюсь на вашу помощь.
Тема такая. Замеряю IOPs-ы и хочу узнать, сколько иопсов может дать сторедж из 6 дисков sata (7200), RAID-5:
Теория показывает что:
6 (HDD 7200 шт.) * 80 IOPs (с диска. для примера) = 480 IOPs в сумме
И при вариантах:
Вариант 1 - Запись 80% Чтение 20% = 192 IOPs
Вариант 2 - Запись 20% Чтение 80% = 408 IOPs
А теперь практика:
Есть виртуальная машина (ОС windows) с подмаунченным диском 1TB.
на этой виртуалке стоит iometer который будет писать/читать, одним воркером, весь диск в 1TB.
В итоге получаю такие цифирьки
как видим что не дотягиваем до значений теории (см. выше)
А теперь покажу результаты тех же замеров (параметры иометра идентичны виртуалке) но уже своего десктопа с двумя дисками один из которых на 2TB:
Если я все правильно понимаю:
То мой десктоп дает на
W80Random100 - 85,7 IOps | 17,0 Read IOps | 68,6 Write IOps
А СХД (рейд из 6 дисков)
W80Random100 - 81,2 IOps | 16,1 Read IOps | 65,1 Write IOps
А вот тут таки вопрос - КАК ТАК?
Где те теоритические 192 иопса?
Где я не прав товарищи?
Заранее благодартвую.
- gs
- Сотрудник Тринити
- Сообщения: 16650
- Зарегистрирован: 23 авг 2002, 17:34
- Откуда: Москва
- Контактная информация:
Re: Помогите понять результаты замеров СХД
Сколько outstanding IOs задано?
Re: Помогите понять результаты замеров СХД
Данный параметр не менял. и по дефолту стоит 1gs писал(а):Сколько outstanding IOs задано?
Сие не есть верно?
- gs
- Сотрудник Тринити
- Сообщения: 16650
- Зарегистрирован: 23 авг 2002, 17:34
- Откуда: Москва
- Контактная информация:
Re: Помогите понять результаты замеров СХД
Это означает, что иометр дает запрос, ждет ответа, и только потом следующий запрос. Понятно, что имеем упор в один винт (ведь один запрос не распараллелишь).
Поставьте очередь побольше и посмотрите.
Поставьте очередь побольше и посмотрите.
Re: Помогите понять результаты замеров СХД
В моем случае, какое значение будет актуальным?gs писал(а):Это означает, что иометр дает запрос, ждет ответа, и только потом следующий запрос. Понятно, что имеем упор в один винт (ведь один запрос не распараллелишь).
Поставьте очередь побольше и посмотрите.
- gs
- Сотрудник Тринити
- Сообщения: 16650
- Зарегистрирован: 23 авг 2002, 17:34
- Откуда: Москва
- Контактная информация:
Re: Помогите понять результаты замеров СХД
Ну это же от задачи зависит.
Поставьте с десяток - разницу сразу увидите.
В реальной задаче глубина очереди растет вследствие роста нагрузки. И в какой-то момент начинается резкий рост латенси (иометр ее тоже показывает) - это значит приплыли, клиенты начинают материться.
Поставьте с десяток - разницу сразу увидите.
В реальной задаче глубина очереди растет вследствие роста нагрузки. И в какой-то момент начинается резкий рост латенси (иометр ее тоже показывает) - это значит приплыли, клиенты начинают материться.
Re: Помогите понять результаты замеров СХД
Результаты с outstanding IOs = 10gs писал(а):Ну это же от задачи зависит.
Поставьте с десяток - разницу сразу увидите.
В реальной задаче глубина очереди растет вследствие роста нагрузки. И в какой-то момент начинается резкий рост латенси (иометр ее тоже показывает) - это значит приплыли, клиенты начинают материться.
W80Random100 - 106,4 IOps | 21.1 Read IOps | 85.2 Write IOps
Мне кажется не шипко выросло...
или будем считать что это есть нормальное значение?
- gs
- Сотрудник Тринити
- Сообщения: 16650
- Зарегистрирован: 23 авг 2002, 17:34
- Откуда: Москва
- Контактная информация:
Re: Помогите понять результаты замеров СХД
Странно это.
Какой контроллер, включен ли кэш?
Какой контроллер, включен ли кэш?
- gs
- Сотрудник Тринити
- Сообщения: 16650
- Зарегистрирован: 23 авг 2002, 17:34
- Откуда: Москва
- Контактная информация:
Re: Помогите понять результаты замеров СХД
Завершена ли инициализация?
Re: Помогите понять результаты замеров СХД
Виноват, про контроллер сказать ничего не могу. могу сказать что вот такой сервак:gs писал(а):Странно это.
Какой контроллер, включен ли кэш?
http://www.synology.com/ru-ru/products/ ... RS10613xs+
И еще раз виноват. не очень понял о чем речь?gs писал(а):Завершена ли инициализация?
Если можно поясните пожалуйста.
Кстати, замерил при outstanding IOs = 100
Получил: W80Random100 - 107,3 IOps | 21.4 Read IOps | 85.8 Write IOps
- gs
- Сотрудник Тринити
- Сообщения: 16650
- Зарегистрирован: 23 авг 2002, 17:34
- Откуда: Москва
- Контактная информация:
Re: Помогите понять результаты замеров СХД
Нашли тоже СХД...
Скорее всего с сетевыми настройками что-то. Потрясите их саппорт - бес его знает, что они в супермикру насовали.
Скорее всего с сетевыми настройками что-то. Потрясите их саппорт - бес его знает, что они в супермикру насовали.
Re: Помогите понять результаты замеров СХД
А что скажут знатоки на такие цифирьки - на одном воркере, и при постепенном увеличении потоков (Queue Depth):
Замеры на сторадже
И замеры на моем десктопе с одним SATA диском с теми же параметрами:
Замеры на сторадже
И замеры на моем десктопе с одним SATA диском с теми же параметрами:
- gs
- Сотрудник Тринити
- Сообщения: 16650
- Зарегистрирован: 23 авг 2002, 17:34
- Откуда: Москва
- Контактная информация:
Re: Помогите понять результаты замеров СХД
Не понимаю я, как этот барабан работает...
При рандомной записи на рэйд5 из шести винтов, с учетом райт пенальти 4, должно получаться порядка 120иопс, плюс-минус трамвайная остановка. Т.е. в этом плане более менее понятно. Но почему оно так тормозит на чтении и почему с глубиной очереди ни на копейку не растут иопсы - не знаю (при этом латенси растет предсказуемо).
При рандомной записи на рэйд5 из шести винтов, с учетом райт пенальти 4, должно получаться порядка 120иопс, плюс-минус трамвайная остановка. Т.е. в этом плане более менее понятно. Но почему оно так тормозит на чтении и почему с глубиной очереди ни на копейку не растут иопсы - не знаю (при этом латенси растет предсказуемо).
Re: Помогите понять результаты замеров СХД
Вот такие вот показатели, "не виноватая я" (с)gs писал(а):Не понимаю я, как этот барабан работает...
При рандомной записи на рэйд5 из шести винтов, с учетом райт пенальти 4, должно получаться порядка 120иопс, плюс-минус трамвайная остановка. Т.е. в этом плане более менее понятно. Но почему оно так тормозит на чтении и почему с глубиной очереди ни на копейку не растут иопсы - не знаю (при этом латенси растет предсказуемо).
Кстати, уважаемый gs, если не сложно, и если у вас есть возможность, не могли бы вы замерить у вас производительность при таких настройках?
на каком рейде 5-ом.
- gs
- Сотрудник Тринити
- Сообщения: 16650
- Зарегистрирован: 23 авг 2002, 17:34
- Откуда: Москва
- Контактная информация:
Re: Помогите понять результаты замеров СХД
У нас нет такого аппарата.
Вы же не аппаратный PCI контроллер тестите. Это сервер с непонятной начинкой, да еще через сеть.
Вы же не аппаратный PCI контроллер тестите. Это сервер с непонятной начинкой, да еще через сеть.
Кто сейчас на конференции
Сейчас этот форум просматривают: нет зарегистрированных пользователей и 27 гостей