СХД 100ТБ, на что смотреть?

[metallic]

Собственно задача:
- хранилище данных объемом 100ТБ одной файловой системой
- отказоустойчивость
- производительность (будет храниться куча маленьких файлов, размеров примерно по 10мб(не жатое видео покадрово), многопоточный доступ к ним, примерно от 10 пользователей). В Общем хотелось бы производительность дисковой системы не менее 200Мб/сек, чтобы не тормозила во время резервного копирования.

Бюджета нет, не представляю сколько это может стоить.
На что можно смотреть, как примерно оценить стоимость?
Рассчитываю строить на SAS-дисках.

[gs]

100ТБ на сас дисках будет стоить очень кучеряво.
Какой требуется доступ пользователей - одна файловая система на всех по файберу или промежуточный сетевой шлюз?

[gs]

Какой прикладной софт будет работать? Какие потоки записи-чтения? Сколько каких потоков одновременно?

[metallic]

100ТБ на сас дисках будет стоить очень кучеряво.

Это понятно, но какая альтернатива? Сата? Предыдущий проект на сата делали, хранилище было 20ТБ, самоп по себе не быстро работало, а когда я начинал писать бекап на ленту - пользователи вешались, сервер просто умирал, а бекап писался порядка 3х недель. Был сервак с контроллером 3ware на 24 винта и соответственно 24 винта сата по 1ТБ, рейд6, производительность при линейном чтении без доп. нагрузки - порядка 80мб/сек в лучшем случае, а при многопоточном доступе сата винты просто выбрасывали белый флаг.

Какой требуется доступ пользователей - одна файловая система на всех по файберу или промежуточный сетевой шлюз?

Работа пользователей с данными будет через сервер на linux/freebsd + Samba.

[metallic]

Какой прикладной софт будет работать? Какие потоки записи-чтения? Сколько каких потоков одновременно?

Что такое композ(compositing) представляете? Т.е. есть видео поренденное в tiff'ки - каждая тифка - это один слой одного кадра, т.е. секунда видео - примерно 24 кадра, каждый кадр 8 слоев, т.е. секунда видео примерно 11,520 файлов. Композитинг - это сборка этих файлов в видео в спец. программе. Заниматься этим будет 5-7 человек одновременно, т.е. нагрузка на сервак будет многопоточной в рандомные места на массиве.

[gs]

Сервер-то по сетке потянет?
Массив можно посчитать IBM DS3500, Huawey-Symantec, Infortrend - мощи у них у всех хватит, главное чтобы диски не захлебнулись. Причем при 100ТБ на дисках сас массивов надо будет не один (количество дисков ограничено), собирая их в кучу LVM'ом. Или же смотреть массивы более высокого уровня, еще дороже.

Да, еще - 200Мбит/с или 200МБайт/с?

[metallic]

Сервер-то по сетке потянет?
Причем при 100ТБ на дисках сас массивов надо будет не один (количество дисков ограничено), собирая их в кучу LVM'ом. И

Ну не проблема же LVM настроить или ZFS на фряхе тоже такие фокусы поддерживает, да даже программный рейд0, тут не в этом вопрос. Вопрос в том, что я не представляю как они(массивы) по отдельности функционировать будут, аппаратно они как будут выглядеть? Включаться/выключаться они будут одновременно? Если нет, что будет с LVM, если один массив чуть позже запустится

Сервер-то по сетке потянет?
Да, еще - 200Мбит/с или 200МБайт/с?

Конечно 200МБайт/с, 200мбит - это 24мбай теоретических, этого очень мало, даже текущий сервер под нагрузкой больше выдает, около 400мбит
А сетка потянет, 2 сетевухи в link aggregation и имеем 2ГБит, все рабочие стации на гигабите сидят.

[gs]

Хотя бы порядок бюджета скажите.

[metallic]

Хотя бы порядок бюджета скажите.

Да нет бюджета, не представляем сколько это может стоить. Бюджет - чем дешевле, тем лучше.

[yuri-]

Подешевле это наверное Supermicro и Neхenta Core Edition сверху.
Используя SSD для L2ARC и ZIL потянет и на SATA винтах.

[hitower]

Какой прикладной софт будет работать? Какие потоки записи-чтения? Сколько каких потоков одновременно?

Что такое композ(compositing) представляете? Т.е. есть видео поренденное в tiff'ки - каждая тифка - это один слой одного кадра, т.е. секунда видео - примерно 24 кадра, каждый кадр 8 слоев, т.е. секунда видео примерно 11,520 файлов. Композитинг - это сборка этих файлов в видео в спец. программе. Заниматься этим будет 5-7 человек одновременно, т.е. нагрузка на сервак будет многопоточной в рандомные места на массиве.

Вам бы разделить нагрузку на запись и чтение, например, читать и писать на разные массивы, это поможет ощутимо.

[metallic]

Какой прикладной софт будет работать? Какие потоки записи-чтения? Сколько каких потоков одновременно?

Что такое композ(compositing) представляете? Т.е. есть видео поренденное в tiff'ки - каждая тифка - это один слой одного кадра, т.е. секунда видео - примерно 24 кадра, каждый кадр 8 слоев, т.е. секунда видео примерно 11,520 файлов. Композитинг - это сборка этих файлов в видео в спец. программе. Заниматься этим будет 5-7 человек одновременно, т.е. нагрузка на сервак будет многопоточной в рандомные места на массиве.

Вам бы разделить нагрузку на запись и чтение, например, читать и писать на разные массивы, это поможет ощутимо.

Нет, это не получится.

[hitower]

Нет, это не получится.

Почему? Софт пишет только в каталог, где лежат эти тифы?

[metallic]

Нет, это не получится.

Почему? Софт пишет только в каталог, где лежат эти тифы?

Каталогов много. Один из пунктов ТЗ - 100ТБ одной ФС, соответственно запись и чтение на эту ФС будут параллельными.

[exLH]

Да нет бюджета, не представляем сколько это может стоить. Бюджет - чем дешевле, тем лучше.

50тыс$ это большой бюджет ?
100тыс$ ?
500тыс$ ?
1млн$ ?
...
С какого момента начинается "чем дешевле, тем лучше"?
Кроме того, очевидно, что с точки зрения удовлетворения потребности в производительности, почти сразу будет "чем дешевле, тем хуже", а с определенной величины - "чем дешевле тем невозможнее".