низкая скорость записи в массивах yotta yi-16 fc-sata2

Поломалось, посыпалось, не работает...

Модераторы: Trinity admin`s, Free-lance moderator`s

ABK
member
Сообщения: 27
Зарегистрирован: 18 июн 2007, 15:50
Откуда: Moscow

низкая скорость записи в массивах yotta yi-16 fc-sata2

Сообщение ABK » 18 июн 2007, 16:07

Есть 2ва массива fc-sata из 16ти дисков в raid6 (рабочая емкость 6.5тбт каждый (gpt)). Соединены с сервером через свитч sanbox5600.
Копирование с массива на массив и по гигабитной сети файлов размером более 10гбт никогда не превосходит скорости 30-34мбт в сек.
инфа по массивам:
диски сигейт 500гбт кэш16 7200
кэш контроллера ётты 1024
взведена поддержка СВЫШЕ 2ТБТ
stripe size 1024
форматирую в windows 2003 sp2 r2 ntfs claster 64к одним динамическим томом
поддержка 8.3 в реестре снята
поддержка времени последнего доступа снята
ну и т.д.
нужен был достаточно быстрый файловый сервер
СИНТЕТИКА БЛЕСК-РЕАЛЬНОЕ КОПИРОВАНИЕ ОТВРАТИТЕЛЬНОЕ

ПОДСКАЖИТЕ-КТО ЭКСПЛУАТИРОВАЛ ПОДОБНОЕ
на доп. вопросы по конфигу готов ответить
заранее спасибо...

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Сообщение gs » 18 июн 2007, 16:11

Копирование больших файлов, да еще в рэйд6, да еще на дешевом ящике - далеко не самая быстрая операция :)
Скорее всего это близко к реальности.
Для успокоения проверьте еще в рэйд5.

Правда есть еще и у винды баги по этой части. Поройте форум - уже обсуждали.

ABK
member
Сообщения: 27
Зарегистрирован: 18 июн 2007, 15:50
Откуда: Moscow

Сообщение ABK » 18 июн 2007, 16:12

СПАСИБО  за краткость

Oleg2
Заслуженный сетевик
Сообщения: 494
Зарегистрирован: 15 окт 2004, 17:47
Откуда: Москва

Re: низкая скорость записи в массивах yotta yi-16 fc-sata2

Сообщение Oleg2 » 18 июн 2007, 17:01

ABK писал(а):Есть 2ва массива fc-sata из 16ти дисков в raid6 (рабочая емкость 6.5тбт каждый (gpt)). Соединены с сервером через свитч sanbox5600.
Копирование с массива на массив и по гигабитной сети файлов размером более 10гбт никогда не превосходит скорости 30-34мбт в сек.
инфа по массивам:
диски сигейт 500гбт кэш16 7200
кэш контроллера ётты 1024
взведена поддержка СВЫШЕ 2ТБТ
stripe size 1024
форматирую в windows 2003 sp2 r2 ntfs claster 64к одним динамическим томом
поддержка 8.3 в реестре снята
поддержка времени последнего доступа снята
ну и т.д.
нужен был достаточно быстрый файловый сервер
СИНТЕТИКА БЛЕСК-РЕАЛЬНОЕ КОПИРОВАНИЕ ОТВРАТИТЕЛЬНОЕ

ПОДСКАЖИТЕ-КТО ЭКСПЛУАТИРОВАЛ ПОДОБНОЕ
на доп. вопросы по конфигу готов ответить
заранее спасибо...
По аналогии с предыдущей моделью (Axus Demon RAID) могу предположить, что Вы могли попасть на провальное сочетание размера страйпа и размера запросов с хоста (размера кластера).
Попробуйте выделить несколько дней и погонять IOmeter на разных размерах блоков с разными размерами страйпов.
Естествнно, посмотрите на состояние кэширования массива в целом и дисков в отдельности (чтобы не стояло writhe through).

Также было бы полезно обновить прошивку (если она у Вас не последняя) не забыв очистить конфигурацию после.

ABK
member
Сообщения: 27
Зарегистрирован: 18 июн 2007, 15:50
Откуда: Moscow

Сообщение ABK » 18 июн 2007, 17:12

я подумал на моей теме уже крест
спасибо за позитивный отклик

прошивка на массивах последняя (следим за этим рьяно)
кеш в настройке стоит в автомате - но логику использования этого Auto я не знаю (в каком случае и когда биос решает использовать WB или WT)

PS В любом случае странно, т.к. в идеальном случае копирование файла 10гиг на мощной раб.станции с сата2 в сата2 по 500 гиг каждый (как в массивах) дают иной раз до 60 мбт в сек (конечно когда в начале одного диска этот файл а на другом пусто)

по поводу размеров-см.старые тесты

еще раз спасибо за понимание моей проблемы

ABK
member
Сообщения: 27
Зарегистрирован: 18 июн 2007, 15:50
Откуда: Moscow

Сообщение ABK » 18 июн 2007, 17:24

вариантов с размерами на самом деле мало

stripe size в ётте 1024 задается стандартно

в windows 2003 можно отформатировать массив по умолчанию (т.е. 4к)

пробовал, результат аналогичен

iometer дает наилучшие показания на размерах блока 1м 4м и совсем чуть хуже 2м

ABK
member
Сообщения: 27
Зарегистрирован: 18 июн 2007, 15:50
Откуда: Moscow

Сообщение ABK » 18 июн 2007, 17:25

вариантов с размерами на самом деле мало

stripe size в ётте 1024 задается стандартно

в windows 2003 можно отформатировать массив по умолчанию (т.е. 4к)

пробовал, результат аналогичен

iometer дает наилучшие показания на размерах блока 1м 4м и совсем чуть хуже 2м

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Сообщение gs » 18 июн 2007, 17:28

Мегабайтные блоки естественно удобны для контроллера, но, к сожалению, очень редко встречаются в реальной жизни. Винда оперирует блоками по 64к, если только не используется софт с собственными механизмами работы с диском.

ABK
member
Сообщения: 27
Зарегистрирован: 18 июн 2007, 15:50
Откуда: Moscow

Сообщение ABK » 18 июн 2007, 17:37

в синтетике с блоками 64к по записи все очень печально (36мбт в сек)
а с 4к и подавно

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Сообщение gs » 18 июн 2007, 17:38

Ну так это вполне похоже на цифры реального трансфера из первого поста...

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Сообщение gs » 18 июн 2007, 17:38

Ну так это вполне похоже на цифры реального трансфера из первого поста...

ABK
member
Сообщения: 27
Зарегистрирован: 18 июн 2007, 15:50
Откуда: Moscow

Сообщение ABK » 18 июн 2007, 17:41

есть у нас сервер Dell с массивами на lsi megaraid scsi 320 на дисках 15000 оборотов..
2ва страйпа по 4ре диска (так, для тестов..)

там при прочих равных...получили скорость 73мбт в сек (и то на чистых дисках (без намека на фрагментацию файлов и директорий))

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Сообщение gs » 18 июн 2007, 17:53

Ну так одно дело страйп, а совсем другое - рэйд6...

ABK
member
Сообщения: 27
Зарегистрирован: 18 июн 2007, 15:50
Откуда: Moscow

Сообщение ABK » 18 июн 2007, 18:02

откуда берутся к примеру цифры от производителей
для yi 320мбт в сек
для yb 640мбт в сек
для HP 900мбт в сек

при каких условиях они получены?

при копировании малоразмерных файлов , помещаемых в серверный кэш (виндовый-около 8 гбт), одиночный файл 2гбт у меня копировался со скоростью 125 мбт в сек, но после нескольких повторов копирования, видимо начался сброс заполненного кэша на диск, далее как обычно...

и когда в форуме читаю "200 мбт в сек пишу локально и легко", я завидую...

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Сообщение gs » 18 июн 2007, 18:06

Ну так так и берутся - путем заточки теста. Это совсем не значит, что в реальности так же будет :(

Ответить

Вернуться в «Массивы - Технические вопросы, решение проблем.»

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 18 гостей