Конфигурация массива и кэширование

Конфигурирование, планирование RAID систем, возможности, технологии, теория. Qlogic, LSI Logic, Adaptec ...

Модераторы: Trinity admin`s, Free-lance moderator`s

katbert
Advanced member
Сообщения: 96
Зарегистрирован: 19 ноя 2009, 09:52
Откуда: Уфа

Конфигурация массива и кэширование

Сообщение katbert » 17 янв 2011, 09:26

Имеется сервер с Adaptec 5805, кэшем 512 МБ и BBU. 8 дисков MBA3300RC по 300 ГБ. 2 процессора Xeon E5640 и 24 ГБ ОЗУ. Сервер планируется использовать как контроллер домена под Windows 2008 R2, сервер Exchange 2010, и небольшой файловый сервер - на 300 персон. Виртуализацию применять в обозримом будущем планов нет.

Есть такой момент - на физическом диске (ну, или LUN), на котором находится раздел с базой Active Directory, отключается кэширование. Смотрю на стенде - машина с двумя HDD. В диспетчере устройств в разделе Дисковые устройства, на том диске, где стоит система на вкладке Политика галка "Разрешить кэширование записи на диск" снята, и даже если поставить ее - после перезагрузки снова снимется.

Первый вопрос - стоит ли создать отдельный массив RAID1 из 2 дисков под ОС, чтобы обойти проблему отключения кэширования Windows?

Второй вопрос - лучше один большой массив RAID5 или RAID10, разбитый на разделы (под базы Exchange, под файлы и папки) или несколько массивов под каждый тип данных - например, три массива RAID1 из оставшихся 6 дисков или 2 массива RAID5 из 3 дисков каждый?

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: Конфигурация массива и кэширование

Сообщение Stranger03 » 17 янв 2011, 12:44

katbert писал(а):Первый вопрос - стоит ли создать отдельный массив RAID1 из 2 дисков под ОС, чтобы обойти проблему отключения кэширования Windows?

Второй вопрос - лучше один большой массив RAID5 или RAID10, разбитый на разделы (под базы Exchange, под файлы и папки) или несколько массивов под каждый тип данных - например, три массива RAID1 из оставшихся 6 дисков или 2 массива RAID5 из 3 дисков каждый?
У вас нормальный контроллер. Сделайте одну большую рейд-группу и порежьте его на логические диски. В терминах Адаптека надо будет выбрать все диски, указать тип рейда и требуемый размер раздела. Сделайте один лун под ОС, второй под все остальное. На втором луне кеш не будет отключен, если только базу АД вы туда не поместите.
По поводу 10-ки или 5-ки, зависит от записи и чтения. Если бОльше читают, чем пишут - 5-ка. Если 50 на 50 = 10-ка. Сменить 5-ку на 10-ку нельзя, как впрочем и наоборот.
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

katbert
Advanced member
Сообщения: 96
Зарегистрирован: 19 ноя 2009, 09:52
Откуда: Уфа

Re: Конфигурация массива и кэширование

Сообщение katbert » 17 янв 2011, 13:37

Спасибо!

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: Конфигурация массива и кэширование

Сообщение Stranger03 » 17 янв 2011, 13:43

katbert писал(а):Спасибо!
Учтите только один момент, если в 5-ке вылетел винт, то просадка до момента полного ребилда будет в несколько раз. А ребилд под нагрузкой может быть неделю легко.
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

katbert
Advanced member
Сообщения: 96
Зарегистрирован: 19 ноя 2009, 09:52
Откуда: Уфа

Re: Конфигурация массива и кэширование

Сообщение katbert » 19 янв 2011, 17:28

Остановился на RAID10. Сделал два массива, каждый использует все 8 HDD.
Вид из ASM:
Вложения
asm-0s.jpg
asm-1s.jpg

katbert
Advanced member
Сообщения: 96
Зарегистрирован: 19 ноя 2009, 09:52
Откуда: Уфа

Re: Конфигурация массива и кэширование

Сообщение katbert » 19 янв 2011, 17:37

Windows два дисковых устройства - Adaptec Array SCSI Disk Device
Диск 0 (150 ГБ) - это система, диск 1 (966 ГБ) - под данные
В свойствах диска на вкладке Общие видно
Диск 0 - Bus Number 4, Target ID 0, LUN 0
Диск 1 - Bus Number 4, Target ID 1, LUN 0
Однако вкладка Политика диска 1 не дает включить кэширование
Вложения
1-2.jpg

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Re: Конфигурация массива и кэширование

Сообщение gs » 19 янв 2011, 17:39

Кэширование управляется в ASM.

katbert
Advanced member
Сообщения: 96
Зарегистрирован: 19 ноя 2009, 09:52
Откуда: Уфа

Re: Конфигурация массива и кэширование

Сообщение katbert » 19 янв 2011, 17:54

Но у диска 0 эта страница выглядит стандартно

Почему тогда на стенде с двумя обычными HDD эта галка снимается после перезагрузки у того HDD, где раздел с базой AD
Вложения
0-2.jpg

Аватара пользователя
gs
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 16650
Зарегистрирован: 23 авг 2002, 17:34
Откуда: Москва
Контактная информация:

Re: Конфигурация массива и кэширование

Сообщение gs » 19 янв 2011, 17:57

Дисковые дрова разные. Адаптек себе на уме, как и любой аппаратный контроллер.

katbert
Advanced member
Сообщения: 96
Зарегистрирован: 19 ноя 2009, 09:52
Откуда: Уфа

Re: Конфигурация массива и кэширование

Сообщение katbert » 19 янв 2011, 18:34

Обе приведенные выше картинки относятся к Adaptec-у. Та, что с желтым warning-ом - это диск 1, без warninga - диск 0. Возникает вопрос - почему они разные?

Настройки кэширования в ASM буду посмотреть

katbert
Advanced member
Сообщения: 96
Зарегистрирован: 19 ноя 2009, 09:52
Откуда: Уфа

Re: Конфигурация массива и кэширование

Сообщение katbert » 19 янв 2011, 19:19

Интересная статья
http://forum.scottmueller.com/viewtopic.php?p=86
Если верить ей - есть аппаратное кэширование на уровне устройства и программное кэширование на уровне Windows. И интересующая меня галка относится как раз к аппаратному кэшу. Где же истина?

Аватара пользователя
Stranger03
Сотрудник Тринити
Сотрудник Тринити
Сообщения: 12979
Зарегистрирован: 14 ноя 2003, 16:25
Откуда: СПб, Екатеринбург
Контактная информация:

Re: Конфигурация массива и кэширование

Сообщение Stranger03 » 20 янв 2011, 07:22

katbert писал(а):И интересующая меня галка относится как раз к аппаратному кэшу. Где же истина?
Последние две картинки относятся к винде, адаптеку на эти галки начхать с высокой колокольни. Кеширование контроллера и дисков у адаптека настраивается в АСМ. Ищите там.
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru

katbert
Advanced member
Сообщения: 96
Зарегистрирован: 19 ноя 2009, 09:52
Откуда: Уфа

Re: Конфигурация массива и кэширование

Сообщение katbert » 28 янв 2011, 12:45

Пока не могу добраться до сервера, чтобы поковырять ASM.
Но так и не понимаю - если галку Винды, относящуюся к кэшированию, можно игнорировать - значит Винда и кэширование отключить не может? А два массива планировал создать как раз на случай отключения кэша Виндой на массиве с базой AD. Нестыковка получается?

Black-Dragon
Advanced member
Сообщения: 507
Зарегистрирован: 17 апр 2009, 00:49
Откуда: Yerevan

Re: Конфигурация массива и кэширование

Сообщение Black-Dragon » 28 янв 2011, 13:52

katbert писал(а):Но так и не понимаю - если галку Винды, относящуюся к кэшированию, можно игнорировать - значит Винда и кэширование отключить не может? А два массива планировал создать как раз на случай отключения кэша Виндой на массиве с базой AD. Нестыковка получается?
(В общем случае) ОС не может управлять политикой кеширования аппаратных контроллеров. Если драйвер контроллера "правильный", то он отрапортует ОС, что кеш выключил (и ОС покажет снятую галочку), а сам продолжит кешировать, пока вы не отключите кеш из менеджера контроллера.

В вашей ситуации, просто проверьте с помощью ASM, что драйвер так и сделал.

Black-Dragon
Advanced member
Сообщения: 507
Зарегистрирован: 17 апр 2009, 00:49
Откуда: Yerevan

Re: Конфигурация массива и кэширование

Сообщение Black-Dragon » 28 янв 2011, 14:09

katbert писал(а):А два массива планировал создать как раз на случай отключения кэша Виндой на массиве с базой AD.
Лучше сделайте один, если ещё не поздно. В большинстве случаев так будет быстрее. Для ОС сделайте отдельный LUN или раздел.

Ответить

Вернуться в «Массивы - RAID технологии.»

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 46 гостей