Модернизация дисковой системы
Модераторы: Trinity admin`s, Free-lance moderator`s
Модернизация дисковой системы
Доброго дня. Давно читаю ваш форум - вот решил задать вопрос.
Есть сервер R2308GZ4GC\2х E5-2620\96GB
На котором крутится в виртуалке 1с сервер с SQL . Вроде бы всех все устраивает - но как всегда "хочется что-то улучшить" (вообщем чешется).
Вопрос касается дисковой системы:
сейчас имеем ASR7805+AFM700 и 4 диска ST9300653SS = собран Раид10 (пробовали собирать 5ку - было заметно хуже). Есть 4 запасных ST9300653SS.
Вопрос №1: Имея то что имеем, как можно улучшить дисковую?
1а. Может быть пересобрать 10ку добавив дисков? (на 6ти или 8ми дисках) - на сколько будет лучше? Как я понимаю улучшиться только чтение?
1б. Или лучше собрать второй раид10 и на него повесить другие виртуалки? Не пострадает ли при этом скорость первого массива - т.к. контроллер будет обслуживать 2 массива?
Вопрос №2: "выкинуть" ST9300653SS, купить 4ре SSD S3610 и собрать раид5 (то что часто тут советуют). Насколько это будет быстрее текущего решения? Прожует ли контроллер эти диски без замедления?
Пару лет назад пробовали создавать раид1 из двух SSDSC2BB120G401 - так вот особого прироста никто не заметил (ни в синтетических тестах, ни в работе) - вернулись обратно на раид10 из САСов.
Спасибо за ваш форум - очень много полезного периодически читаю.
Есть сервер R2308GZ4GC\2х E5-2620\96GB
На котором крутится в виртуалке 1с сервер с SQL . Вроде бы всех все устраивает - но как всегда "хочется что-то улучшить" (вообщем чешется).
Вопрос касается дисковой системы:
сейчас имеем ASR7805+AFM700 и 4 диска ST9300653SS = собран Раид10 (пробовали собирать 5ку - было заметно хуже). Есть 4 запасных ST9300653SS.
Вопрос №1: Имея то что имеем, как можно улучшить дисковую?
1а. Может быть пересобрать 10ку добавив дисков? (на 6ти или 8ми дисках) - на сколько будет лучше? Как я понимаю улучшиться только чтение?
1б. Или лучше собрать второй раид10 и на него повесить другие виртуалки? Не пострадает ли при этом скорость первого массива - т.к. контроллер будет обслуживать 2 массива?
Вопрос №2: "выкинуть" ST9300653SS, купить 4ре SSD S3610 и собрать раид5 (то что часто тут советуют). Насколько это будет быстрее текущего решения? Прожует ли контроллер эти диски без замедления?
Пару лет назад пробовали создавать раид1 из двух SSDSC2BB120G401 - так вот особого прироста никто не заметил (ни в синтетических тестах, ни в работе) - вернулись обратно на раид10 из САСов.
Спасибо за ваш форум - очень много полезного периодически читаю.
Re: Модернизация дисковой системы
Нет, и запись тоже ускорится. Теоретически - кратно (в 1,5 для 6-ти и в 2 раза для 8-ми дисков); впрочем, и практически где-то так же. Вообще хорошие у Вас диски... резкие.bogidaich писал(а): Вопрос касается дисковой системы:
сейчас имеем ASR7805+AFM700 и 4 диска ST9300653SS = собран Раид10 (пробовали собирать 5ку - было заметно хуже). Есть 4 запасных ST9300653SS.
Вопрос №1: Имея то что имеем, как можно улучшить дисковую?
1а. Может быть пересобрать 10ку добавив дисков? (на 6ти или 8ми дисках) - на сколько будет лучше? Как я понимаю улучшиться только чтение?
Не пострадает - контроллер достаточно мощный, чтобы "не заметить" второй массив.bogidaich писал(а):1б. Или лучше собрать второй раид10 и на него повесить другие виртуалки? Не пострадает ли при этом скорость первого массива - т.к. контроллер будет обслуживать 2 массива?
Но оптимальнее всё же сделать новую общую рейд-группу из бОльшего числа дисков - тогда скорость работы этой рейд-группы будет больше, нежели скорость отдельных групп по 4 диска.
Меня, правда, несколько смущает тот факт, что Вы до сих пор работали без HSD - это может быть "чревато боком".
Т.е. Вы, конечно, можете создать новую рейд-группу R10 на все 8 доступных Вам дисков на данном контроллере (и тем самым кратно увеличить скорость работы группы), но мне как-то неуютно было бы обходиться без HSD.
Тут ещё большой вопрос о профиле нагрузки - если запись в явном меньшинстве, то можно замутить R6 из семи дисков и один оставить как HSD: можете немного потерять на записи (и то лишь в тех режимах, когда её, записи, объём не будет вмещаться в бортовой кеш контроллера), но при этом хорошо поднимется чтение, прибавится объём (даже против R10 из 8 дисков) и увеличится надёжность (рейд-группа не только выдержит вылет любых двух дисков подряд - в отличие от R10, где второй имеет право вылететь лишь в другом сабъюните - но и отребилдится автоматом без вмешательства админа, в противном случае вынужденного найти хард на замену и поменять на него сдохший вручную).
Начнём с конца: у Вашего контроллера довольно резкий RoC ("процессор"), так что ssd, безусловно, должен дать Вам заметный прирост.bogidaich писал(а):Вопрос №2: "выкинуть" ST9300653SS, купить 4ре SSD S3610 и собрать раид5 (то что часто тут советуют). Насколько это будет быстрее текущего решения? Прожует ли контроллер эти диски без замедления?
Особенно если Вы не будете жадничать и увеличите WLA (Over Provisionihg Space) против нескольких процентов заводской, просто не до конца разметив объём ssd под рейд-группу с оставлением свободными 15-20% объёма (это даст фору BGC при длительной массированной записи, уменьшим тем самым фризы). Плюс увеличится ресурс рейд-группы. Ну и большое преимущество именно указанных Вами ssd - возможность безопасно включить кеш самих ssd (который "подстрахован" процедурой его аварийного flush`a в ячейки с подпиткой во время этого бортовыми конденсаторами).
Я, правда, не уверен, что R5 - это хорошая идея (точнее, уверен в обратном).
Лучше уж выбирать из R10 и R6 - зависит от профиля нагрузки, требуемого объёма, скорости, надёжности и т.д.
Ну, отсюда плохо видно, в чём там у Вас была засада - как уже неоднократно говорилось, надо смотреть на профили нагрузки и настройки контроллера и самой рейд-группы.bogidaich писал(а):Пару лет назад пробовали создавать раид1 из двух SSDSC2BB120G401 - так вот особого прироста никто не заметил (ни в синтетических тестах, ни в работе) - вернулись обратно на раид10 из САСов.
Может, Вы тогда подошли буквально к рекомендации - обоснованной! - отключать кеш дисков (не обратив внимания на спеку Ваших ssd в части наличия конденсаторной поддержки борт-кеша) и получили просадку на запись (фризы записи на ssd могут стать неприятной неожиданностью... особенно при заполнении ssd "под горлышко" и/или при интенсивной записи, за которой не успевает BGC)?
Или ещё какой косяк случился.
- Stranger03
- Сотрудник Тринити
- Сообщения: 12979
- Зарегистрирован: 14 ноя 2003, 16:25
- Откуда: СПб, Екатеринбург
- Контактная информация:
Re: Модернизация дисковой системы
Контроллер прожует, но тут дилема будет.bogidaich писал(а):Вопрос №2: "выкинуть" ST9300653SS, купить 4ре SSD S3610 и собрать раид5 (то что часто тут советуют). Насколько это будет быстрее текущего решения? Прожует ли контроллер эти диски без замедления?
- для SATA/SAS рекомендуется отключать кеш на дисках и включать кеш на контроллере
- для SSD все наоборот
Если на одном контроллере смешивать разные диски в разных группах, то надо подумать, как лучше будет.
Кстати Раид5 на S3610 вполне нормальный вариант.
Это странно, может у вас не в дисках затык?Пару лет назад пробовали создавать раид1 из двух SSDSC2BB120G401 - так вот особого прироста никто не заметил (ни в синтетических тестах, ни в работе) - вернулись обратно на раид10 из САСов.
Re: Модернизация дисковой системы
Большое спасибо за ответы.
Немного поясню предыдущее сообщение.
С объемом данных у нас пока не напряженно, всегда стараемся чтобы не больше 50% было занято.
С неполной разметкой ССД - тоже ясно, всегда так делаем даже на станциях (бестпрактикс уже можно сказать).
Касательно горячей замены дисков - после перехода на виртуалки все стало проще, все мигрирует на резерную ноду, далее все работы выполняются без напряженки, нервов и пота. Тем более что maxview storage manager отлично рассылает уведомления ежели что не так.
Когда пробовали раид1 на двух SSDSC2BB120G401, прошло много времени и из подробностей помню что кеш контроллера был отключен (как это рекомендует конфигуратор адаптек), а кеш дисков был включен исходя из этого
Сравнивалось именно раид1 на 2х ССД, и раид10 на 4х САСах. На 4 ССД результаты были бы явно другими.
Пока наверно попробуем поднять раид10 на 8ми дисках = благо покупать ничего не надо.
А ссд будем потихоньку закупать (сразу большие траты не одобряют)
Как я понял переход на ССД лучше начинать от 4х дисков? Или хотябы от 3х (два в раид1, один в хотспайр)? Вообще имеет смысл раид1 на двух ССД, или лучше собирать от 4 дисков?
Кстати такой же вопрос по контроллеру 6805 (на резервной ноде стоит) - сильно будут отличаться ответы или все также?
ПС: на текущий момент времени вообще имеет смысл чтото строить на ST9300653SS, т.к. цена 3610 почти такая же? В каких задачах предпочтение при покупке может быть отдано ST9300653SS ?
Немного поясню предыдущее сообщение.
С объемом данных у нас пока не напряженно, всегда стараемся чтобы не больше 50% было занято.
С неполной разметкой ССД - тоже ясно, всегда так делаем даже на станциях (бестпрактикс уже можно сказать).
Касательно горячей замены дисков - после перехода на виртуалки все стало проще, все мигрирует на резерную ноду, далее все работы выполняются без напряженки, нервов и пота. Тем более что maxview storage manager отлично рассылает уведомления ежели что не так.
Когда пробовали раид1 на двух SSDSC2BB120G401, прошло много времени и из подробностей помню что кеш контроллера был отключен (как это рекомендует конфигуратор адаптек), а кеш дисков был включен исходя из этого
Сравнивалось именно раид1 на 2х ССД, и раид10 на 4х САСах. На 4 ССД результаты были бы явно другими.
Пока наверно попробуем поднять раид10 на 8ми дисках = благо покупать ничего не надо.
А ссд будем потихоньку закупать (сразу большие траты не одобряют)
Как я понял переход на ССД лучше начинать от 4х дисков? Или хотябы от 3х (два в раид1, один в хотспайр)? Вообще имеет смысл раид1 на двух ССД, или лучше собирать от 4 дисков?
Кстати такой же вопрос по контроллеру 6805 (на резервной ноде стоит) - сильно будут отличаться ответы или все также?
ПС: на текущий момент времени вообще имеет смысл чтото строить на ST9300653SS, т.к. цена 3610 почти такая же? В каких задачах предпочтение при покупке может быть отдано ST9300653SS ?
- Stranger03
- Сотрудник Тринити
- Сообщения: 12979
- Зарегистрирован: 14 ноя 2003, 16:25
- Откуда: СПб, Екатеринбург
- Контактная информация:
Re: Модернизация дисковой системы
Ну все правильно, но SSD в вашей ситуации должны были порвать 4-е SAS диска.bogidaich писал(а):Когда пробовали раид1 на двух SSDSC2BB120G401, прошло много времени и из подробностей помню что кеш контроллера был отключен (как это рекомендует конфигуратор адаптек), а кеш дисков был включен исходя из этого
Сравнивалось именно раид1 на 2х ССД, и раид10 на 4х САСах. На 4 ССД результаты были бы явно другими.
От 2-х.bogidaich писал(а):Как я понял переход на ССД лучше начинать от 4х дисков? Или хотябы от 3х (два в раид1, один в хотспайр)? Вообще имеет смысл раид1 на двух ССД, или лучше собирать от 4 дисков?
Ответы те же, но 6805-й староват контроллер. Новых дисков в таблице совместимости не будет, но скорей всего работать будет.bogidaich писал(а):Кстати такой же вопрос по контроллеру 6805 (на резервной ноде стоит) - сильно будут отличаться ответы или все также?
Re: Модернизация дисковой системы
Это не проблема. Можно установить опцию "Global Physical Devices Write Cache Policy" в значение "Drive Specific" и выборочно назначить различные параметры для кэшей отдельных дисков.Stranger03 писал(а): Контроллер прожует, но тут дилема будет.
- для SATA/SAS рекомендуется отключать кеш на дисках и включать кеш на контроллере
- для SSD все наоборот
Если на одном контроллере смешивать разные диски в разных группах, то надо подумать, как лучше будет.
Понятно, что параметрами кэша контроллера управляем уже на уровне logical devices, отдельных массивов.
IMHO:
- собрать из 6 SAS HDD RAID10 + HS + 1 шт. в ЗИП,
- убедиться, что счастья нет,
- купить SSD SATA из HCL для RAID1, куда перенести быстрые ресурсы, для начала - vhd с tempdb виртуального сервера sql.
Как-то так, если без изучения доп.информации.
- Stranger03
- Сотрудник Тринити
- Сообщения: 12979
- Зарегистрирован: 14 ноя 2003, 16:25
- Откуда: СПб, Екатеринбург
- Контактная информация:
Re: Модернизация дисковой системы
Один человек не может все знать, спасибо за подсказку,Bormoto писал(а):Это не проблема. Можно установить опцию "Global Physical Devices Write Cache Policy" в значение "Drive Specific" и выборочно назначить различные параметры для кэшей отдельных дисков.
Понятно, что параметрами кэша контроллера управляем уже на уровне logical devices, отдельных массивов.
Re: Модернизация дисковой системы
подскажите в этом направленииBormoto писал(а):т,
- купить SSD SATA из HCL для RAID1
на сайте https://www.microsemi.com/products/stor ... patibility
нашел документ http://download.adaptec.com/pdfs/compat ... eries7.pdf
там про ССД вообще ни слова
- Stranger03
- Сотрудник Тринити
- Сообщения: 12979
- Зарегистрирован: 14 ноя 2003, 16:25
- Откуда: СПб, Екатеринбург
- Контактная информация:
Re: Модернизация дисковой системы
http://download.adaptec.com/pdfs/compat ... eries7.pdfbogidaich писал(а):там про ССД вообще ни слова
Как минимум почти все интелы кроме 3600 серии. Отдельная страничка с названием "Solid State Drives (SSDs)".
Кто сейчас на конференции
Сейчас этот форум просматривают: нет зарегистрированных пользователей и 25 гостей