Проблема с adaptec 5805 - размер RAID 10/1E ограничен 1 Тб

Поломалось, посыпалось, не работает...

Модераторы: Trinity admin`s, Free-lance moderator`s

Ответить
77Dragon
member
Сообщения: 23
Зарегистрирован: 12 мар 2008, 10:11
Откуда: Moscow

Проблема с adaptec 5805 - размер RAID 10/1E ограничен 1 Тб

Сообщение 77Dragon » 19 сен 2013, 14:43

Добрый день.

Довольно давно купили у Вас хороший storage-сервер с контроллером 5805, создали на нем RAID 10 на пару Тб, и все было хорошо, пока не докупили лицензию к Open-E на увеличение емкости iSCSI-таргета.
Диски при этом не менялись, т.е. стоят оригинальные (Вами же подобранные, если я не ошибаюсь), т.е. мы сразу планировали расширяться и купили больше, чем использовалось.

Убил старый массив, пытаюсь создать новый 10 или 1E (пробовал на 4, 6, 8 одинаковых 1Т-дисках), он успешно создается, но ограничен всегда 1 Тб!
При этом массив RAID0 создается правильный, т.е. размер_диска*количество_дисков. Т.е. проблема именно в 10 или 1E.

Вот контроллер
(прошивка вроде самая свежая для него):

Adaptec UCLI> arcconf getconfig 1 ad
Controllers found: 1
----------------------------------------------------------------------
Controller information
----------------------------------------------------------------------
Controller Status : Optimal
Channel description : SAS/SATA
Controller Model : Adaptec 5805
Controller Serial Number : 9D44113B9F3
Physical Slot : 4
Temperature : 56 C/ 132 F (Normal)
Installed memory : 512 MB
Copyback : Enabled
Background consistency check : Disabled
Automatic Failover : Enabled
Defunct disk drive count : 0
Logical devices/Failed/Degraded : 1/0/0
--------------------------------------------------------
Controller Version Information
--------------------------------------------------------
BIOS : 5.2-0 (18948)
Firmware : 5.2-0 (18948)
Driver : 1.1-5 (2456)
Boot Flash : 5.2-0 (18948)
--------------------------------------------------------
Controller Battery Information
--------------------------------------------------------
Status : Optimal
Over temperature : No
Capacity remaining : 99 percent
Time remaining (at current draw) : 1 days, 19 hours, 55 minutes

Вот корзина (с экспандером, как я понимаю):
Device #16
Device is an Enclosure services device
Reported Channel,Device : 2,0
Enclosure ID : 0
Type : SES2
Vendor : LSILOGIC
Model : SASX28 A.0
Firmware : 9
Status of Enclosure services device
Fan 1 status : Optimal
Fan 2 status : Optimal
Fan 3 status : Optimal
Temperature : Normal

Вот диски (первые 6 одинаковые, тестирую на них):

Device #0
Device is a Hard drive
State : Ready
Supported : Yes
Transfer Speed : SATA 3.0 Gb/s
Reported Channel,Device : 0,8
Vendor :
Model : ST31000528AS
Firmware : CC35
Size : 953869 MB
Write Cache : Disabled (write-through)
FRU : None
S.M.A.R.T. : No
Device #1
Device is a Hard drive
State : Ready
Supported : Yes
Transfer Speed : SATA 3.0 Gb/s
Reported Channel,Device : 0,9
Vendor :
Model : ST31000528AS
Firmware : CC35
Size : 953869 MB
Write Cache : Disabled (write-through)
FRU : None
S.M.A.R.T. : No
Device #2
Device is a Hard drive
State : Ready
Supported : Yes
Transfer Speed : SATA 3.0 Gb/s
Reported Channel,Device : 0,10
Vendor :
Model : ST31000528AS
Firmware : CC35
Size : 953869 MB
Write Cache : Disabled (write-through)
FRU : None
S.M.A.R.T. : No
Device #3
Device is a Hard drive
State : Ready
Supported : Yes
Transfer Speed : SATA 3.0 Gb/s
Reported Channel,Device : 0,11
Vendor :
Model : ST31000528AS
Firmware : CC38
Size : 953869 MB
Write Cache : Disabled (write-through)
FRU : None
S.M.A.R.T. : No
Device #4
Device is a Hard drive
State : Ready
Supported : Yes
Transfer Speed : SATA 3.0 Gb/s
Reported Channel,Device : 0,12
Vendor :
Model : ST31000528AS
Firmware : CC38
Size : 953869 MB
Write Cache : Disabled (write-through)
FRU : None
S.M.A.R.T. : No
Device #5
Device is a Hard drive
State : Ready
Supported : Yes
Transfer Speed : SATA 3.0 Gb/s
Reported Channel,Device : 0,13
Vendor :
Model : ST31000528AS
Firmware : CC38
Size : 953869 MB
Write Cache : Disabled (write-through)
FRU : None
S.M.A.R.T. : No

Создаю RAID 10 из шести 1-Тб дисков (т.е. объем должен быть 3 Тб):
Adaptec UCLI> arcconf create 1 logicaldrive name video max 10 0 8 0 9 0 10 0 11 0 12 0 13
Controllers found: 1
...
Creating logical device: video
Command completed successfully.

Смотрю что получилось:

Adaptec UCLI> arcconf getconfig 1 ld
Controllers found: 1
----------------------------------------------------------------------
Logical device information
----------------------------------------------------------------------
Logical device number 0
Logical device name : video
RAID level : 10
Status of logical device : Optimal
Size : 1048575 MB
Stripe-unit size : 256 KB
Read-cache mode : Enabled
Write-cache mode : Enabled (write-back)
Write-cache setting : Enabled (write-back) when protected by battery
Partitioned : No
Protected by Hot-Spare : No
Bootable : Yes
Failed stripes : No
--------------------------------------------------------
Logical device segment information
--------------------------------------------------------
Group 0, Segment 0 : Present (0,8)
Group 0, Segment 1 : Present (0,9)
Group 1, Segment 0 : Present (0,10)
Group 1, Segment 1 : Present (0,11)
Group 2, Segment 0 : Present (0,12)
Group 2, Segment 1 : Present (0,13)

Пробовал разные конфигурации и количество дисков, уровень RAID 1E, - всегда максимум 1 Тб.
Проверил в таргете - контроллер цифру не врет, отдает ему LUN размером ровно в 1Т.

Пробовал задать размер вручную (т.е. например 2861607 Мб), - "not enought space".
Очищать метаданные на дисках и реинициализировать их - тоже пробовал.

Ну работало же раньше все, в чем засада, - никак не пойму...

(параллельно на контроллере крутится 5ee из 6 SAS-дисков RAID-размером 1,2 Тб, - все ок).

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Re: Проблема с adaptec 5805 - размер RAID 10/1E ограничен 1 Тб

Сообщение gs » 19 сен 2013, 15:04

Странно. А если винты переинициализировать?

77Dragon
member
Сообщения: 23
Зарегистрирован: 12 мар 2008, 10:11
Откуда: Moscow

Re: Проблема с adaptec 5805 - размер RAID 10/1E ограничен 1 Тб

Сообщение 77Dragon » 19 сен 2013, 15:21

gs писал(а):Странно. А если винты переинициализировать?
Пробовал... :(

Только разве что secure erase не делал...

Еще не пробовал делать 50, но нам не нужен 50, нам нужен 10...

И еще проводил эксперимент, хотел сам создать нулевые рейды и их зазеркалить.
Вроде как Adaptec позволяет создавать рейды из рейдов, и вроде как есть команда:
ARCCONF CREATE <Controller#> LOGICALDRIVE RVOLUME <LD#> <LD#> [LD#] ...
Однако нигде в интернете не нашел расшифровки, что есть RVOLUME, потому как в описании написано невразумительное:
Rvolume is the RAID level for a RAID volume logical drive.
LD# is the logical drive numbers for two or more logical drives to be concatenated into the RAID volume

Попробовал создать 2 LD по 2 диска в нулевых рейдах, но как их зазеркалировать? Если дать эту команду
ARCCONF CREATE 1 LOGICALDRIVE RVOLUME 0 1
он создает "нечто" на 4 Тб с уровнем рейда "RAID level: raid_level" (что это?!), при этом в дисках полная мутота - какие-то сегменты оказываются missing, какие-то - rebuild, и при этом сам рейд - Optimal.
Чушь какая-то...
Последний раз редактировалось 77Dragon 19 сен 2013, 15:30, всего редактировалось 2 раза.

Аватара пользователя
Tert
Advanced member
Сообщения: 4233
Зарегистрирован: 19 янв 2003, 08:09
Откуда: Москва
Контактная информация:

Re: Проблема с adaptec 5805 - размер RAID 10/1E ограничен 1 Тб

Сообщение Tert » 19 сен 2013, 15:25

77Dragon
Возможно глючит arcconf.
Попробуйте из BIOS'а контроллера создать массив.

Flyer
Advanced member
Сообщения: 53
Зарегистрирован: 27 янв 2012, 15:37
Откуда: SPb

Re: Проблема с adaptec 5805 - размер RAID 10/1E ограничен 1 Тб

Сообщение Flyer » 19 сен 2013, 16:32

Старая версия arcconf?

77Dragon
member
Сообщения: 23
Зарегистрирован: 12 мар 2008, 10:11
Откуда: Moscow

Re: Проблема с adaptec 5805 - размер RAID 10/1E ограничен 1 Тб

Сообщение 77Dragon » 20 сен 2013, 20:20

Через биос контроллера создалось после некоторого шаманства.

Шаманство заключалось в том, что один из дисков (но не его место в корзине) вышел из строя настолько, что контроллер и корзина глючили, пока он был установлен (вплоть до kernel panic). Выкинули диск - все ок.

Заодно обновили и arcconf, вроде теперь все кажет правильно :)

Ответить

Вернуться в «Массивы - Технические вопросы, решение проблем.»

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 26 гостей