Xyratex 5412e

Технологии постороения кластеров (вычислительных и отказоустойчивых), настройка терминал серверов,
SAN , NAS, FibreChannel, Infiniband

Модераторы: Trinity admin`s, Free-lance moderator`s

Ответить
arc-xel
Junior member
Сообщения: 14
Зарегистрирован: 08 июл 2015, 12:14
Откуда: Санкт-Петербург

Xyratex 5412e

Сообщение arc-xel » 08 июл 2015, 12:51

Добрый день!

Имеем следующую проблему с Топик девайсом.

Конфигурация оборудования:

Xyratex F5412E
1) Raid 5 - 4 Tb (SATA) H:\
2) Raid 6 - 3 Tb (SAS 300Gb) F:\
3) Raid 6 - 3 Tb (SAS 300Gb) G:\
4) Raid 6 - 3 Tb (SAS 600Gb) E:\

СХД Подключена в оптический свитч 2мя хвостами.
В этот же свитч подключены 3 хоста supermicro + СХД IBM Storwize
На хостах ОС Win2012R2

На один из хостов делаем мапинг дисков с Xyratex размером с массив.
При копировании с диска на диск допустим F:\ - G:\ информации в (60 GB) наблюдаем нормальную скорость (600 мб/с - она постепенно падает до 50 мб/с - пишет в кеш)
При обратном копировании G:\ - F:\ этого же файла наблюдаем залипание на 20 мин. (ничего не копируется). Потом отлипает и начинает копировать со скорость 5 мб/с дорастая до 50 мб/с.

Тестировал на разных массивах и хостах проброшенных с этой же СХД. Ситуация такая же.
Проблемы в виде хоста, оптики и драйверов исключаем. т.к проблема началась до появления СХД IBM.
На IBM подобных залипаний не наблюдается.

Bormoto
Advanced member
Сообщения: 253
Зарегистрирован: 06 июл 2007, 22:20
Откуда: спб

Re: Xyratex 5412e

Сообщение Bormoto » 09 июл 2015, 09:51

arc-xel писал(а):СХД Подключена в оптический свитч 2мя хвостами.
Т.е., Xyratex - двухконтроллерный? Диски подключены как multi-path disk device, mpio policy - round robin, до дисков видно два пути на вкладочке MPIO? Так?
Какие у вас fc-адаптеры и fc-свитч? Какое значение execution throttle на fc-адаптерах выставлено? Не слишком ли оно велико? Уж не 65536 ли по умолчанию? :wink:

Значение линейного трансфера 600 мб/с между RAID6 из 12 SAS HDD каждый на этом аппарате вызывает некоторые сомнения. Это даже не кэш, а какая-то "игра цифр".

Вообще, если нет запаса комплектующих, аппарату пора бы на покой. Обычный современный сервер, оснащенный аппаратным RAID-контроллером с ssd-кэшированием и/или отдельными массивами из ssd, превосходит во всем, кроме возможности продолжения работы при выходе из строя одного из контроллеров.

P.S. Storwize без ssd - как анекдот про пиво без водки. :)

arc-xel
Junior member
Сообщения: 14
Зарегистрирован: 08 июл 2015, 12:14
Откуда: Санкт-Петербург

Re: Xyratex 5412e

Сообщение arc-xel » 11 июл 2015, 11:13

Спасибо за ответ!

Разобрался в первопричине.
На одном из контроллеров СХД(на него не заходил раньше) все диски на полках расширения в статусе PROXY.
Посмотрел коммутацию, обновил прошивку - не помогло.
Вырубил сбойный контроллер - взлетело.

В win 2012R2 при копировании через FAR система сначала пишет в кэш - поэтому и скорости показывает > 700 мб/c :o
Если же зайти в монитор ресурсов то файл всё ещё копируется, после того как FAR вроде бы его скопировал.
При обратном копировании этого же файла теперь не происходит залипания.

При работе сбойного контроллера замерял скорость на самой СХД не больше 30 мб/c.
При отключенном контроллере скорость стала > 150 мб/с

Ответить

Вернуться в «Кластеры, Аппаратная часть»

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 2 гостя