Железка для записи.

Как создать сервер оптимальной конфигурации.

Модераторы: Trinity admin`s, Free-lance moderator`s

Ответить
atdp03
member
Сообщения: 20
Зарегистрирован: 14 апр 2011, 09:51
Откуда: Мск

Железка для записи.

Сообщение atdp03 » 22 окт 2013, 19:31

Здравствуйте.

В обозримом будущем, может понадобиться железка, с примерно следующими параметрами (на старте, хочется иметь возможность хотя бы удвоить цифры при необходимости).
Ёмкость - 80-100 тер, 1,5-2 гигабайта в секунду линейной записи в один поток, чтения практически не будет.
Параллелится эта задача ну очень плохо.
Бюджет, как у всех, нерезиновый. =)

В каком направлении стоит смотреть?

Аватара пользователя
Tert
Advanced member
Сообщения: 4233
Зарегистрирован: 19 янв 2003, 08:09
Откуда: Москва
Контактная информация:

Re: Железка для записи.

Сообщение Tert » 22 окт 2013, 21:03

atdp03
Ну вот и первые жертвы новых требований СОРМ'а.
Вы хоть от какого провайдера пришли?

atdp03
member
Сообщения: 20
Зарегистрирован: 14 апр 2011, 09:51
Откуда: Мск

Re: Железка для записи.

Сообщение atdp03 » 22 окт 2013, 21:06

Ещё не жертвы, но готовимся. ;)

Провайдера подскажет whois по ip с которого пишу.

Но, хотелось бы по теме. =)

Аватара пользователя
Tert
Advanced member
Сообщения: 4233
Зарегистрирован: 19 янв 2003, 08:09
Откуда: Москва
Контактная информация:

Re: Железка для записи.

Сообщение Tert » 22 окт 2013, 22:11

atdp03
Вы эту железку куда будете подключать?
Т.е. вам нужно блочное устройство или доступ по NFS?

atdp03
member
Сообщения: 20
Зарегистрирован: 14 апр 2011, 09:51
Откуда: Мск

Re: Железка для записи.

Сообщение atdp03 » 22 окт 2013, 22:20

Вот затрудняюсь ответить.

Однако в NFS есть сомнения. Учитывая что нам понадобится исходно 2*10Г на вход, ставить ещё 4*10 на выход - жёстко, на мой взгляд.

Аватара пользователя
Tert
Advanced member
Сообщения: 4233
Зарегистрирован: 19 янв 2003, 08:09
Откуда: Москва
Контактная информация:

Re: Железка для записи.

Сообщение Tert » 22 окт 2013, 23:23

atdp03
А к какому серверу вы будете подключать сторадж?
Какая там будет ОС?

atdp03
member
Сообщения: 20
Зарегистрирован: 14 апр 2011, 09:51
Откуда: Мск

Re: Железка для записи.

Сообщение atdp03 » 22 окт 2013, 23:37

Сервера нет, это пока только прикидки.
Стоять там будет либо фря, либо какой-нить убунту.

Аватара пользователя
Tert
Advanced member
Сообщения: 4233
Зарегистрирован: 19 янв 2003, 08:09
Откуда: Москва
Контактная информация:

Re: Железка для записи.

Сообщение Tert » 23 окт 2013, 00:10

atdp03
Тогда надо брать сразу готовый сервер с дисковой системой.
Под FreeBSD я бы все строил программным способом на ZFS.

Какие у вас требования к мощности процессоров и объему ОЗУ?

atdp03
member
Сообщения: 20
Зарегистрирован: 14 апр 2011, 09:51
Откуда: Мск

Re: Железка для записи.

Сообщение atdp03 » 23 окт 2013, 00:23

Tert писал(а):atdp03
Тогда надо брать сразу готовый сервер с дисковой системой.
Так про неё и вопрос. =)
Под FreeBSD я бы все строил программным способом на ZFS.
Вот не могу избавиться от предвзятости.
Да, я использую zfs с самого начала её появления во фре. Дома оно рулит.
Да, последнюю пару лет она бегает на толстой машинке с бекапами, поверх аппаратного R6 (сугубо для автомагического расширения при добавлении дисков).
И вот эта последняя машинка, раз в пару-тройку месяцев срывается в ребут. Некритично, но некрасиво.
Есть ещё пара машинок, где оно бегает поверх пары R5*8 дисков. Одна из которых периодически фризится на несколько секунд.
Да, памяти там везде по 8 гиг, но на последней паре это потолок.
Какие у вас требования к мощности процессоров и объему ОЗУ?
Сугубо умозрительно, это должно быть что-то высокочастотное и малоядерное - есть сомнения что tcpdump сумеет параллелиться.
Столь же умозрительно, я предполагаю что памяти стоит иметь столько, чтобы суметь частично компенсировать задержки при записи. Ну и да, иметь в виду ZFS.
Надо бы на досуге пописать зеркало с 10Г в /dev/null. =)

Аватара пользователя
Tert
Advanced member
Сообщения: 4233
Зарегистрирован: 19 янв 2003, 08:09
Откуда: Москва
Контактная информация:

Re: Железка для записи.

Сообщение Tert » 23 окт 2013, 04:57

atdp03
Да, последнюю пару лет она бегает на толстой машинке с бекапами, поверх аппаратного R6 (сугубо для автомагического расширения при добавлении дисков).
Много клиентов было у нас с похожими проблемами. И у всех наступало просветление.
Надо выкинуть аппаратный RAID контроллер, поставить обычный HBA и делать пулы полностью средствами самой ZFS.

Завтра попробую прислать варианты сервера.

atdp03
member
Сообщения: 20
Зарегистрирован: 14 апр 2011, 09:51
Откуда: Мск

Re: Железка для записи.

Сообщение atdp03 » 23 окт 2013, 05:16

Tert писал(а):atdp03
Да, последнюю пару лет она бегает на толстой машинке с бекапами, поверх аппаратного R6 (сугубо для автомагического расширения при добавлении дисков).
Много клиентов было у нас с похожими проблемами. И у всех наступало просветление.
Надо выкинуть аппаратный RAID контроллер, поставить обычный HBA и делать пулы полностью средствами самой ZFS.
Ох.
Ещё ведь небось и в соответствии с рекомендациями SUN? Гиг памяти на тер пространства, SSD под ZIL?
Впрочем, в данном случае лишняя сотня гиг памяти погоды не сделает, как мне кажется. =)

Аватара пользователя
Tert
Advanced member
Сообщения: 4233
Зарегистрирован: 19 янв 2003, 08:09
Откуда: Москва
Контактная информация:

Re: Железка для записи.

Сообщение Tert » 23 окт 2013, 22:44

atdp03
Ещё ведь небось и в соответствии с рекомендациями SUN? Гиг памяти на тер пространства, SSD под ZIL?
У вас там линейная запись. Без чтения. Поэтому много памяти не надо. Зачем там ARC хранить.
Да и ZIL тоже особо не надо никуда класть.

Выслал вариант сервера под ZFS на почту.

atdp03
member
Сообщения: 20
Зарегистрирован: 14 апр 2011, 09:51
Откуда: Мск

Re: Железка для записи.

Сообщение atdp03 » 23 окт 2013, 23:06

Tert писал(а):atdp03
Ещё ведь небось и в соответствии с рекомендациями SUN? Гиг памяти на тер пространства, SSD под ZIL?
Выслал вариант сервера под ZFS на почту.
Получил, спасибо. Вздрогнул.
Представил себе что при неудачном раскладе придётся покупать это же, но с сертификатами, опломбированное и т.д., за цену раза в два-три выше. Начал дёргаться глаз...

Аватара пользователя
Tert
Advanced member
Сообщения: 4233
Зарегистрирован: 19 янв 2003, 08:09
Откуда: Москва
Контактная информация:

Re: Железка для записи.

Сообщение Tert » 24 окт 2013, 04:25

atdp03
Предложенный вариант точно потянет нужный поток.
При этом вполне можно делать любой уровень RAIDZ на дисках (хотя, конечно, в пул надо объединять не один vdev на всех дисках, а несколько).
Можно прикинуть вариант на SATA дисках. Но на этих дисках я бы уже в пул на зеркалах из пар дисков.

Ответить

Вернуться в «Серверы - Конфигурирование»

Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и 20 гостей