дисковая полка для виртуалок
Модераторы: Trinity admin`s, Free-lance moderator`s
-
- Power member
- Сообщения: 39
- Зарегистрирован: 21 мар 2003, 09:05
- Откуда: Саратов
- Контактная информация:
дисковая полка для виртуалок
Добрый день.
В настоящее время есть несколько серверов (5-10 в зависимости от филиала). Сервера на платформах Supermicro 6016T-URF. В настоящее время в каждом из них размещено по 4 винта sata seagate 500gb серия ns. ОС -CentOS. Винты объединены в raid10 (dmraid) . Гипервизор - kvm. На каждом сервере запущено от 3 до 20 виртуалок, в зависимости от требований виртуалок к памяти. Диск для каждой из виртуалок нарезается с помощью LVM. Типичный размер диска для виртуальной машины от 10 до 100гб.
В этой схеме не устраивает следующее:
1. невозможна live-миграция виртуалок с одного сервера на другой.
2. очень медленно работают снепшоты. фактически, создание снепшота для виртуалки тормозит ее дисковую активность раза в два.
3. ежедневное резервное копирование виртуалок существенно просаживает дисковую систему.
Хочется:
по минимуму - выбрать дисковую полку в каждый филиал, подключить ее к каждому серверу, виртуалки на ней. делать снепшоты, не влияющие на скорость io виртуалки.
по максимуму - две полки в каждый филиал, зеркалирующих данные между собой, что бы избежать единой точки отказа.
Интерфейс подключения полки к серверам - обсуждается, т.к. все равно какие то контроллеры в сервера докупать.
Предложите?
В настоящее время есть несколько серверов (5-10 в зависимости от филиала). Сервера на платформах Supermicro 6016T-URF. В настоящее время в каждом из них размещено по 4 винта sata seagate 500gb серия ns. ОС -CentOS. Винты объединены в raid10 (dmraid) . Гипервизор - kvm. На каждом сервере запущено от 3 до 20 виртуалок, в зависимости от требований виртуалок к памяти. Диск для каждой из виртуалок нарезается с помощью LVM. Типичный размер диска для виртуальной машины от 10 до 100гб.
В этой схеме не устраивает следующее:
1. невозможна live-миграция виртуалок с одного сервера на другой.
2. очень медленно работают снепшоты. фактически, создание снепшота для виртуалки тормозит ее дисковую активность раза в два.
3. ежедневное резервное копирование виртуалок существенно просаживает дисковую систему.
Хочется:
по минимуму - выбрать дисковую полку в каждый филиал, подключить ее к каждому серверу, виртуалки на ней. делать снепшоты, не влияющие на скорость io виртуалки.
по максимуму - две полки в каждый филиал, зеркалирующих данные между собой, что бы избежать единой точки отказа.
Интерфейс подключения полки к серверам - обсуждается, т.к. все равно какие то контроллеры в сервера докупать.
Предложите?
- exLH
- Сотрудник Тринити
- Сообщения: 5061
- Зарегистрирован: 11 фев 2004, 15:49
- Откуда: Москва
- Контактная информация:
Re: дисковая полка для виртуалок
NetApp FAS2020, EMC VNXe 3100alw писал(а):Предложите?
Подключать по iSCSI.
Можно реплицировать критичные данные на центральную площадку.
Почтовый адрес для связи: a.ivanov@trinitygroup.ru | ICQ: 112586598
-
- Power member
- Сообщения: 39
- Зарегистрирован: 21 мар 2003, 09:05
- Откуда: Саратов
- Контактная информация:
Re: дисковая полка для виртуалок
iSCSI - не будет ли медленно? большое latency?
- exLH
- Сотрудник Тринити
- Сообщения: 5061
- Зарегистрирован: 11 фев 2004, 15:49
- Откуда: Москва
- Контактная информация:
Re: дисковая полка для виртуалок
Если использовать плохие коммутаторы - конечно будет плохо!alw писал(а):iSCSI - не будет ли медленно? большое latency?
Почтовый адрес для связи: a.ivanov@trinitygroup.ru | ICQ: 112586598
-
- Power member
- Сообщения: 39
- Зарегистрирован: 21 мар 2003, 09:05
- Откуда: Саратов
- Контактная информация:
Re: дисковая полка для виртуалок
в настоящее время мы используем коммутаторы hp procurve 2810, 2510
сервера подключены транком.
сервера подключены транком.
-
- Power member
- Сообщения: 39
- Зарегистрирован: 21 мар 2003, 09:05
- Откуда: Саратов
- Контактная информация:
Re: дисковая полка для виртуалок
может быть есть смысл смотреть в сторону fc, infiniband ?
- gs
- Сотрудник Тринити
- Сообщения: 16650
- Зарегистрирован: 23 авг 2002, 17:34
- Откуда: Москва
- Контактная информация:
Re: дисковая полка для виртуалок
Посмотрите мониторингом нагрузку.
Инфинибанд - это точно мимо кассы.
А ФЦ интересен только если у Вас мощные линейные потоки и/или уже есть инфраструктура.
Инфинибанд - это точно мимо кассы.
А ФЦ интересен только если у Вас мощные линейные потоки и/или уже есть инфраструктура.
Re: дисковая полка для виртуалок
Посмотрите в сторону ibm ds3524 + пара lsi sas6160. С латентностью порядок, только репликация по SAS пока не поддерживается и ограничение по расстоянию активных кабелей 25м. И при этом значительно дешевле, чем FC.
-
- Power member
- Сообщения: 39
- Зарегистрирован: 21 мар 2003, 09:05
- Откуда: Саратов
- Контактная информация:
Re: дисковая полка для виртуалок
а сколько серверов в таком варианте можно к полке подключить?
Re: дисковая полка для виртуалок
alw,
Сколько угодно, если использовать SAS-коммутатор.
Сколько угодно, если использовать SAS-коммутатор.
С уважением, Александр.
-
- Power member
- Сообщения: 39
- Зарегистрирован: 21 мар 2003, 09:05
- Откуда: Саратов
- Контактная информация:
Re: дисковая полка для виртуалок
наверное дальнейшее обсуждение лучше перенести в skype (awasilyev) или icq (4831950)
- DeadMazay
- Advanced member
- Сообщения: 1743
- Зарегистрирован: 20 сен 2007, 15:07
- Откуда: Новосибирск, Мск
- Контактная информация:
Re: дисковая полка для виртуалок
учитывая чтоalw писал(а):а сколько серверов в таком варианте можно к полке подключить?
имеет 16 портов... то при правильном подключении до 14 серверовkp писал(а):lsi sas6160.
с уважением Сергей.
ICQ: 365984224
ICQ: 365984224
Re: дисковая полка для виртуалок
учитывая,что sas коммутаторы каскадируются и и в каждом по 14 пассивных портов и два активных - много) Главное ставить коммутаторы парами и правильно настроить мультипас - питание у них на тонкой сопле.alw писал(а):а сколько серверов в таком варианте можно к полке подключить?
Re: дисковая полка для виртуалок
Там помоему ограничение в два хопа.
Re: дисковая полка для виртуалок
SAS and SATA connectivity of up to 1,000 devices
http://www.lsi.com/products/storagecomp ... witch.aspx
http://www.lsi.com/products/storagecomp ... witch.aspx
Кто сейчас на конференции
Сейчас этот форум просматривают: нет зарегистрированных пользователей и 71 гость