Низкая скорость записи:LSI 9261-8i + ST3300657SS + Win2008R2
Модераторы: Trinity admin`s, Free-lance moderator`s
Низкая скорость записи:LSI 9261-8i + ST3300657SS + Win2008R2
Господа, посоветуйте "кто виноват и что делать".
Платформа: Supermicro 6026t-3rf
Контроллер: LSI 9261-8i (fw: 4.6-10M09 P18, 12.12.0-0073; drv: 5.0 - 11M06 P1, 5.1.112)
Диски: Seagate ST3300657SS (fw: 0008), входит в MegaRAID Interoperability Matrix, правда с fw 0006
ОС: MS Windows 2008 R2 Std
Тестовая конфигурация:
1. Система на 1 SATA ST500NM0011 (в RAID0)
2. 2 ST3300657SS, каждый в RAID0
3. Копируем используя xcopy /J (не используем кэш windows)
4. порядка 15 файлов, общим объемом 40 ГБ
Проблема: устоявшаяся скорость записи, при копировании больших объемов, на ST3300657SS составляет примерно 10 MB/sec.
Пробовали:
1. отсаживать ST3300657SS на отдельный контроллер LSI 9261-8i
2. через бэкплэйн/без бэкплэйна
3. разные кабели/каналы/fw/drv/настройки
Ничего не помогает.
При этом, при записи на SATA ST500NM0011 или на ST3146156SS устоявшаяся скорость записи - порядка 140 MB/sec.
Платформа: Supermicro 6026t-3rf
Контроллер: LSI 9261-8i (fw: 4.6-10M09 P18, 12.12.0-0073; drv: 5.0 - 11M06 P1, 5.1.112)
Диски: Seagate ST3300657SS (fw: 0008), входит в MegaRAID Interoperability Matrix, правда с fw 0006
ОС: MS Windows 2008 R2 Std
Тестовая конфигурация:
1. Система на 1 SATA ST500NM0011 (в RAID0)
2. 2 ST3300657SS, каждый в RAID0
3. Копируем используя xcopy /J (не используем кэш windows)
4. порядка 15 файлов, общим объемом 40 ГБ
Проблема: устоявшаяся скорость записи, при копировании больших объемов, на ST3300657SS составляет примерно 10 MB/sec.
Пробовали:
1. отсаживать ST3300657SS на отдельный контроллер LSI 9261-8i
2. через бэкплэйн/без бэкплэйна
3. разные кабели/каналы/fw/drv/настройки
Ничего не помогает.
При этом, при записи на SATA ST500NM0011 или на ST3146156SS устоявшаяся скорость записи - порядка 140 MB/sec.
- gs
- Сотрудник Тринити
- Сообщения: 16650
- Зарегистрирован: 23 авг 2002, 17:34
- Откуда: Москва
- Контактная информация:
Re: Низкая скорость записи:LSI 9261-8i + ST3300657SS + Win2008R2
Какие настройки кэширования массивов и винтов?
Re: Низкая скорость записи:LSI 9261-8i + ST3300657SS + Win2008R2
Начинали с (для всех vd):
1. disk cache policy: enable
2. read policy: always read ahead
3. io policy: direct io
4. write policy: always write back
Потом пробовали различные комбинации.
1. disk cache policy: enable
2. read policy: always read ahead
3. io policy: direct io
4. write policy: always write back
Потом пробовали различные комбинации.
- gs
- Сотрудник Тринити
- Сообщения: 16650
- Зарегистрирован: 23 авг 2002, 17:34
- Откуда: Москва
- Контактная информация:
Re: Низкая скорость записи:LSI 9261-8i + ST3300657SS + Win2008R2
Т.е. не дружит с конкретной моделью винтов?
Пишите в саппорт (у LSI недавно местный саппортер появился, кстати) - тут кроме вендора никто не разберется.
Пишите в саппорт (у LSI недавно местный саппортер появился, кстати) - тут кроме вендора никто не разберется.
Re: Низкая скорость записи:LSI 9261-8i + ST3300657SS + Win2008R2
Похоже что именно "не дружит". Причем еще и с ST3600057SS (но его хоть в списке совместимости нет).
Причем серия ...57SS - это корпоративный мэйнстрим SAS hdd от Seagate.
9261-8i - на свалку?
Местный саппортер? Контакты не подскажете?
Причем серия ...57SS - это корпоративный мэйнстрим SAS hdd от Seagate.
9261-8i - на свалку?
Местный саппортер? Контакты не подскажете?
- gs
- Сотрудник Тринити
- Сообщения: 16650
- Зарегистрирован: 23 авг 2002, 17:34
- Откуда: Москва
- Контактная информация:
Re: Низкая скорость записи:LSI 9261-8i + ST3300657SS + Win2008R2
Почему на свалку? Отличный контроллер. Просто какая-то временная бяка в прошивке.
А контакты не скажу - он только что пришел и даже визитку не оставил
Пишите в штатный саппорт, они скорее всего ему запрос перефутболят.
А контакты не скажу - он только что пришел и даже визитку не оставил
Пишите в штатный саппорт, они скорее всего ему запрос перефутболят.
Re: Низкая скорость записи:LSI 9261-8i + ST3300657SS + Win2008R2
Уважаемый gav, может есть смысл попробовать для начала IOmeter запустить, посмотреть, сколько все же реально IOPSов он насчитает. Дабы было на что опереться при детализации проблемы...
Re: Низкая скорость записи:LSI 9261-8i + ST3300657SS + Win2008R2
Господа, кому интересно - решение было найдено случайно и если кто-нибудь мне объяснит, что сие значит - мой респект. Я отдельно попрошу разъяснений у саппорта LSI.
Собсно подробности:
Отписались в саппорт LSI, списались с инженером, обычная череда вопросов и ответов, в итоге (и почему я не удивлен) добрались до вопроса: а точно-ли у вас та фирмварь для рассматриваемой модели, которая упоминается в compatibility matrix. А упоминается итам версия 0006. На наших же винтах - 0008, с 0006 - нету.
Инженер саппорта предложил сделать даунгрэйд фирмари. Сие сделать проблематично - Сигейт не дает со своего сайта фирмари для сасов вообще (или просто мы не нашли?). Пришлось искать диск с фирмарью 0006 (отдельная тема). Нашли. Попробовали свое копирование и результаты не порадовали: начинает бодренько с 150 МБ/с(первые 10 ГБ), но потом также скатывается до привычных 9 МБ/с.
Конечно же попробовали iometer, со следующими настройками:
- 0% read, 100% write
- 0% random, 100% sequential
- transfer request size от 4 KB до 1023 MB
- outstanding io's from 1 to 64
- как на диск windows, так и просто на диск
В результате: приемлемые скорости от 150 до 200 МБ/с.
Греша на windows, решили сделать перерыв, оставили сервер в покое и занялись другими делами.
Часа через 4 вернулись и для затравки снова запустили виндовое копирование. ЗАРАБОТАЛО.
Крутили диск так и сяк, пересоздавая vd, перезагружая сервер и т.д. - все равно РАБОТАЕТ.
Решили повторить хорошее начинание, воткнули новый диск на 600, попробовали покопировать – все плохо. Оставили сервер в покое на 4 часа. Вернулись к нему, попробовали еще раз – все РАБОТАЕТ. Опять крутили диск так и сяк, пересоздавая vd, перезагружая сервер, копируя сата-сас/сас-сас/сас-сата, и т.д. - все равно РАБОТАЕТ.
Итак: vd мы инициализировали фастом, с включенным BGI.
Если кто-то скажет – нуууууу…., наш ответ:
1. Мы также пытались инициализировать и фулом. После полной инициализации (полтора часа) все равно тормозило.
2. BGI? Но, по крайней мере раньше, работающее BGI отражалось в MegaRAID Storage Manager-е (и его логах) + индикацией активности дисков. Мы периодически проверяли – ни того ни другого не было.
3. САТА диски и старый диск на 146 ГБ начинали работать нормально СРАЗУ. Без "отстоя".
В итоге: Метод «дай новому vd отстоятся» по факту работает. По крайней мере на 3-х тестовых дисках.
Собсно подробности:
Отписались в саппорт LSI, списались с инженером, обычная череда вопросов и ответов, в итоге (и почему я не удивлен) добрались до вопроса: а точно-ли у вас та фирмварь для рассматриваемой модели, которая упоминается в compatibility matrix. А упоминается итам версия 0006. На наших же винтах - 0008, с 0006 - нету.
Инженер саппорта предложил сделать даунгрэйд фирмари. Сие сделать проблематично - Сигейт не дает со своего сайта фирмари для сасов вообще (или просто мы не нашли?). Пришлось искать диск с фирмарью 0006 (отдельная тема). Нашли. Попробовали свое копирование и результаты не порадовали: начинает бодренько с 150 МБ/с(первые 10 ГБ), но потом также скатывается до привычных 9 МБ/с.
Конечно же попробовали iometer, со следующими настройками:
- 0% read, 100% write
- 0% random, 100% sequential
- transfer request size от 4 KB до 1023 MB
- outstanding io's from 1 to 64
- как на диск windows, так и просто на диск
В результате: приемлемые скорости от 150 до 200 МБ/с.
Греша на windows, решили сделать перерыв, оставили сервер в покое и занялись другими делами.
Часа через 4 вернулись и для затравки снова запустили виндовое копирование. ЗАРАБОТАЛО.
Крутили диск так и сяк, пересоздавая vd, перезагружая сервер и т.д. - все равно РАБОТАЕТ.
Решили повторить хорошее начинание, воткнули новый диск на 600, попробовали покопировать – все плохо. Оставили сервер в покое на 4 часа. Вернулись к нему, попробовали еще раз – все РАБОТАЕТ. Опять крутили диск так и сяк, пересоздавая vd, перезагружая сервер, копируя сата-сас/сас-сас/сас-сата, и т.д. - все равно РАБОТАЕТ.
Итак: vd мы инициализировали фастом, с включенным BGI.
Если кто-то скажет – нуууууу…., наш ответ:
1. Мы также пытались инициализировать и фулом. После полной инициализации (полтора часа) все равно тормозило.
2. BGI? Но, по крайней мере раньше, работающее BGI отражалось в MegaRAID Storage Manager-е (и его логах) + индикацией активности дисков. Мы периодически проверяли – ни того ни другого не было.
3. САТА диски и старый диск на 146 ГБ начинали работать нормально СРАЗУ. Без "отстоя".
В итоге: Метод «дай новому vd отстоятся» по факту работает. По крайней мере на 3-х тестовых дисках.
Re: Низкая скорость записи:LSI 9261-8i + ST3300657SS + Win2008R2
Тот-же бок.
Контроллер Adaptec 6405E, винты: 2хSAS Seagate ST3300657SS fw0008.
Скорость записи 10-15Мбайт/с с выключеным кэшем и 30 со включеным. RAID1.
Только поставил, буду ждать 4 часа...
Контроллер Adaptec 6405E, винты: 2хSAS Seagate ST3300657SS fw0008.
Скорость записи 10-15Мбайт/с с выключеным кэшем и 30 со включеным. RAID1.
Только поставил, буду ждать 4 часа...
Re: Низкая скорость записи:LSI 9261-8i + ST3300657SS + Win2008R2
Отстоялся - действительно заработало все.
Только через 2 дня опять та-же беда, скорость 50Мбайт/с на чтение и запись...
Только через 2 дня опять та-же беда, скорость 50Мбайт/с на чтение и запись...
Re: Низкая скорость записи:LSI 9261-8i + ST3300657SS + Win2008R2
У меня 6 шт. Seagate ST3300657, изначально шли с прошивкой 0006, прошил на 0008 (как? поищите мою тему).
Ни с той прошей, ни с новой проблем на LSI 9260 (суть тот же 9261) и на 9265 нет.
Инициализировал, естесственно, фуллом.
Ни с той прошей, ни с новой проблем на LSI 9260 (суть тот же 9261) и на 9265 нет.
Инициализировал, естесственно, фуллом.
-
- Advanced member
- Сообщения: 450
- Зарегистрирован: 10 окт 2006, 18:35
- Откуда: Киев
- Контактная информация:
Re: Низкая скорость записи:LSI 9261-8i + ST3300657SS + Win2008R2
Попробуйте обновить драйвер сетевухи, мне помогло, скорость рейд контроллера выросла.
Кто сейчас на конференции
Сейчас этот форум просматривают: нет зарегистрированных пользователей и 27 гостей