Железка для записи.
Модераторы: Trinity admin`s, Free-lance moderator`s
Железка для записи.
Здравствуйте.
В обозримом будущем, может понадобиться железка, с примерно следующими параметрами (на старте, хочется иметь возможность хотя бы удвоить цифры при необходимости).
Ёмкость - 80-100 тер, 1,5-2 гигабайта в секунду линейной записи в один поток, чтения практически не будет.
Параллелится эта задача ну очень плохо.
Бюджет, как у всех, нерезиновый. =)
В каком направлении стоит смотреть?
В обозримом будущем, может понадобиться железка, с примерно следующими параметрами (на старте, хочется иметь возможность хотя бы удвоить цифры при необходимости).
Ёмкость - 80-100 тер, 1,5-2 гигабайта в секунду линейной записи в один поток, чтения практически не будет.
Параллелится эта задача ну очень плохо.
Бюджет, как у всех, нерезиновый. =)
В каком направлении стоит смотреть?
- Tert
- Advanced member
- Сообщения: 4233
- Зарегистрирован: 19 янв 2003, 08:09
- Откуда: Москва
- Контактная информация:
Re: Железка для записи.
atdp03
Ну вот и первые жертвы новых требований СОРМ'а.
Вы хоть от какого провайдера пришли?
Ну вот и первые жертвы новых требований СОРМ'а.
Вы хоть от какого провайдера пришли?
Re: Железка для записи.
Ещё не жертвы, но готовимся.
Провайдера подскажет whois по ip с которого пишу.
Но, хотелось бы по теме. =)
Провайдера подскажет whois по ip с которого пишу.
Но, хотелось бы по теме. =)
- Tert
- Advanced member
- Сообщения: 4233
- Зарегистрирован: 19 янв 2003, 08:09
- Откуда: Москва
- Контактная информация:
Re: Железка для записи.
atdp03
Вы эту железку куда будете подключать?
Т.е. вам нужно блочное устройство или доступ по NFS?
Вы эту железку куда будете подключать?
Т.е. вам нужно блочное устройство или доступ по NFS?
Re: Железка для записи.
Вот затрудняюсь ответить.
Однако в NFS есть сомнения. Учитывая что нам понадобится исходно 2*10Г на вход, ставить ещё 4*10 на выход - жёстко, на мой взгляд.
Однако в NFS есть сомнения. Учитывая что нам понадобится исходно 2*10Г на вход, ставить ещё 4*10 на выход - жёстко, на мой взгляд.
- Tert
- Advanced member
- Сообщения: 4233
- Зарегистрирован: 19 янв 2003, 08:09
- Откуда: Москва
- Контактная информация:
Re: Железка для записи.
atdp03
А к какому серверу вы будете подключать сторадж?
Какая там будет ОС?
А к какому серверу вы будете подключать сторадж?
Какая там будет ОС?
Re: Железка для записи.
Сервера нет, это пока только прикидки.
Стоять там будет либо фря, либо какой-нить убунту.
Стоять там будет либо фря, либо какой-нить убунту.
- Tert
- Advanced member
- Сообщения: 4233
- Зарегистрирован: 19 янв 2003, 08:09
- Откуда: Москва
- Контактная информация:
Re: Железка для записи.
atdp03
Тогда надо брать сразу готовый сервер с дисковой системой.
Под FreeBSD я бы все строил программным способом на ZFS.
Какие у вас требования к мощности процессоров и объему ОЗУ?
Тогда надо брать сразу готовый сервер с дисковой системой.
Под FreeBSD я бы все строил программным способом на ZFS.
Какие у вас требования к мощности процессоров и объему ОЗУ?
Re: Железка для записи.
Так про неё и вопрос. =)Tert писал(а):atdp03
Тогда надо брать сразу готовый сервер с дисковой системой.
Вот не могу избавиться от предвзятости.Под FreeBSD я бы все строил программным способом на ZFS.
Да, я использую zfs с самого начала её появления во фре. Дома оно рулит.
Да, последнюю пару лет она бегает на толстой машинке с бекапами, поверх аппаратного R6 (сугубо для автомагического расширения при добавлении дисков).
И вот эта последняя машинка, раз в пару-тройку месяцев срывается в ребут. Некритично, но некрасиво.
Есть ещё пара машинок, где оно бегает поверх пары R5*8 дисков. Одна из которых периодически фризится на несколько секунд.
Да, памяти там везде по 8 гиг, но на последней паре это потолок.
Сугубо умозрительно, это должно быть что-то высокочастотное и малоядерное - есть сомнения что tcpdump сумеет параллелиться.Какие у вас требования к мощности процессоров и объему ОЗУ?
Столь же умозрительно, я предполагаю что памяти стоит иметь столько, чтобы суметь частично компенсировать задержки при записи. Ну и да, иметь в виду ZFS.
Надо бы на досуге пописать зеркало с 10Г в /dev/null. =)
- Tert
- Advanced member
- Сообщения: 4233
- Зарегистрирован: 19 янв 2003, 08:09
- Откуда: Москва
- Контактная информация:
Re: Железка для записи.
atdp03
Надо выкинуть аппаратный RAID контроллер, поставить обычный HBA и делать пулы полностью средствами самой ZFS.
Завтра попробую прислать варианты сервера.
Много клиентов было у нас с похожими проблемами. И у всех наступало просветление.Да, последнюю пару лет она бегает на толстой машинке с бекапами, поверх аппаратного R6 (сугубо для автомагического расширения при добавлении дисков).
Надо выкинуть аппаратный RAID контроллер, поставить обычный HBA и делать пулы полностью средствами самой ZFS.
Завтра попробую прислать варианты сервера.
Re: Железка для записи.
Ох.Tert писал(а):atdp03Много клиентов было у нас с похожими проблемами. И у всех наступало просветление.Да, последнюю пару лет она бегает на толстой машинке с бекапами, поверх аппаратного R6 (сугубо для автомагического расширения при добавлении дисков).
Надо выкинуть аппаратный RAID контроллер, поставить обычный HBA и делать пулы полностью средствами самой ZFS.
Ещё ведь небось и в соответствии с рекомендациями SUN? Гиг памяти на тер пространства, SSD под ZIL?
Впрочем, в данном случае лишняя сотня гиг памяти погоды не сделает, как мне кажется. =)
- Tert
- Advanced member
- Сообщения: 4233
- Зарегистрирован: 19 янв 2003, 08:09
- Откуда: Москва
- Контактная информация:
Re: Железка для записи.
atdp03
Да и ZIL тоже особо не надо никуда класть.
Выслал вариант сервера под ZFS на почту.
У вас там линейная запись. Без чтения. Поэтому много памяти не надо. Зачем там ARC хранить.Ещё ведь небось и в соответствии с рекомендациями SUN? Гиг памяти на тер пространства, SSD под ZIL?
Да и ZIL тоже особо не надо никуда класть.
Выслал вариант сервера под ZFS на почту.
Re: Железка для записи.
Получил, спасибо. Вздрогнул.Tert писал(а):atdp03Выслал вариант сервера под ZFS на почту.Ещё ведь небось и в соответствии с рекомендациями SUN? Гиг памяти на тер пространства, SSD под ZIL?
Представил себе что при неудачном раскладе придётся покупать это же, но с сертификатами, опломбированное и т.д., за цену раза в два-три выше. Начал дёргаться глаз...
- Tert
- Advanced member
- Сообщения: 4233
- Зарегистрирован: 19 янв 2003, 08:09
- Откуда: Москва
- Контактная информация:
Re: Железка для записи.
atdp03
Предложенный вариант точно потянет нужный поток.
При этом вполне можно делать любой уровень RAIDZ на дисках (хотя, конечно, в пул надо объединять не один vdev на всех дисках, а несколько).
Можно прикинуть вариант на SATA дисках. Но на этих дисках я бы уже в пул на зеркалах из пар дисков.
Предложенный вариант точно потянет нужный поток.
При этом вполне можно делать любой уровень RAIDZ на дисках (хотя, конечно, в пул надо объединять не один vdev на всех дисках, а несколько).
Можно прикинуть вариант на SATA дисках. Но на этих дисках я бы уже в пул на зеркалах из пар дисков.
Кто сейчас на конференции
Сейчас этот форум просматривают: нет зарегистрированных пользователей и 30 гостей