Форум Тринити

Открытый технический форум по серверам и системам хранения данных, кластерным решениям, SAN, NAS.
Microsemi infortrend storage
Текущее время: 16 июл 2018, 06:47

Часовой пояс: UTC + 3 часа [ Летнее время ]




Начать новую тему Ответить на тему  [ Сообщений: 18 ]  На страницу 1, 2  След.
Автор Сообщение
СообщениеДобавлено: 24 янв 2013, 11:36 
Не в сети
member

Зарегистрирован: 02 авг 2010, 18:54
Сообщения: 26
Откуда: MSK
Доброго времени, форумчане
Вопрос по большей части для специалистов по высокопроизводительным кластерам (HPC).
Есть блейд-корзина с 16-ю лезвиями, СХД с интегрированными оптическими коммутаторами.
1) Планируется поставить на лезвия пакеты VMware vSphere 5 Essentials Plus Kit, на виртуальных машинах развернуть Microsoft HPC Server 2008 для HPC-кластера.
Насколько такие решения применяются?

2) Предположим у нас 2 варианта: 16 виртуальных машин с Windows HPC и 16 физических машин на каждом лезвии с Windows HPC.
При каком варианте производительность HPC-кластера выше? На сколько приблизительно?

Очень жду Ваши комментарии и замечания по теме


Вернуться к началу
 Профиль  
 
СообщениеДобавлено: 24 янв 2013, 12:33 
Не в сети
Сотрудник Тринити
Сотрудник Тринити
Аватара пользователя

Зарегистрирован: 14 ноя 2003, 17:25
Сообщения: 13040
Откуда: СПб, Екатеринбург
А какой сакральный смысл ставить Вмварь и сверху городить ХПЦ МС кластер? Почему не обойтись одним МС?

_________________
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru


Вернуться к началу
 Профиль  
 
СообщениеДобавлено: 24 янв 2013, 13:36 
Не в сети
member

Зарегистрирован: 02 авг 2010, 18:54
Сообщения: 26
Откуда: MSK
Stranger03 писал(а):
А какой сакральный смысл ставить Вмварь и сверху городить ХПЦ МС кластер? Почему не обойтись одним МС?


Я так думаю, что VMotion и остальные функции HA и перспективы облачных вычислений, которые дает гипервизор ESXi.
Это мой первый опыт MS HPC, пока вопрос в рамках уточнения, но я не видел возможностей HA у MS HPC, это ведь так?


Вернуться к началу
 Профиль  
 
СообщениеДобавлено: 24 янв 2013, 14:18 
Не в сети
Сотрудник Тринити
Сотрудник Тринити
Аватара пользователя

Зарегистрирован: 24 ноя 2011, 16:30
Сообщения: 120
Откуда: Санкт-Петербург
rhiannon писал(а):
Stranger03 писал(а):
А какой сакральный смысл ставить Вмварь и сверху городить ХПЦ МС кластер? Почему не обойтись одним МС?


Я так думаю, что VMotion и остальные функции HA и перспективы облачных вычислений, которые дает гипервизор ESXi.
Это мой первый опыт MS HPC, пока вопрос в рамках уточнения, но я не видел возможностей HA у MS HPC, это ведь так?


ыыы. Так непосредственно вычислительной HPC ноде, HA даром не сдался. Вычислительных нод много (ближайший аналог NLB-нода) - одна сдохнет, ну и ладно - нагрузка на другую переедет.
HA нужен только для ноды которая диспечеризацией занимается.


Вернуться к началу
 Профиль  
 
СообщениеДобавлено: 24 янв 2013, 14:26 
Не в сети
member

Зарегистрирован: 02 авг 2010, 18:54
Сообщения: 26
Откуда: MSK
ыыы. Так непосредственно вычислительной HPC ноде, HA даром не сдался. Вычислительных нод много (ближайший аналог NLB-нода) - одна сдохнет, ну и ладно - нагрузка на другую переедет.
HA нужен только для ноды которая диспечеризацией занимается.[/quote]

Да, я знаю про узел диспетчеризации, просто делать часть серверов на ESXi, часть на голом железке, как-то странно. Так какая может быть потеря производительности от установки HPC на ВМ?

Вопрос по установке HPC: как лучше делать купить Windows Server 2008 Standard x64 и поставить на него HPC Pack, или ставить сразу Windows HPC 2008 R2? Какие плюсы/минусы?


Вернуться к началу
 Профиль  
 
СообщениеДобавлено: 24 янв 2013, 14:30 
Не в сети
member

Зарегистрирован: 02 авг 2010, 18:54
Сообщения: 26
Откуда: MSK
Что там по использованию десктопных Windows 7 для работы MS HPC?
И по поводу программирования для MS HPC, какие библиотеки используются, где литература, мануалы, хорошие ссылки?

Кто-нибудь кодил для MS HPC, или для систем параллельных вычислений? Посоветуйте, опытному программисту, начинающему в области параллельного программирования нормальные материалы (желательно для опенсорс)?


Вернуться к началу
 Профиль  
 
СообщениеДобавлено: 24 янв 2013, 16:29 
Не в сети
Сотрудник Тринити
Сотрудник Тринити
Аватара пользователя

Зарегистрирован: 24 ноя 2011, 16:30
Сообщения: 120
Откуда: Санкт-Петербург
rhiannon писал(а):
Да, я знаю про узел диспетчеризации, просто делать часть серверов на ESXi, часть на голом железке, как-то странно. Так какая может быть потеря производительности от установки HPC на ВМ?

Вопрос по установке HPC: как лучше делать купить Windows Server 2008 Standard x64 и поставить на него HPC Pack, или ставить сразу Windows HPC 2008 R2? Какие плюсы/минусы?


1) А зачем вам ESXi? Тут выгоднее использовать Hyper-V.
2) Основной затык в использовании Гипервизоров это:
- требование наличия низколатентного высокоскоростного соединения между нодами, по простому Infiniband, которую гипервизоры не поддерживают;
- затруднен проброс в виртуалки всяческих акселераторов (не умеют гипервизоры их виртуализовать)
- сама архитектура HPC требует, чтобы ноды были одинаковые и данных на себе не хранили, поэтому нет особого смысла вводить доп. слой виртуализации.
- в любом случае виртуализация "отьест" производительность, а в случае HPC это главное.


Вернуться к началу
 Профиль  
 
СообщениеДобавлено: 24 янв 2013, 17:20 
Не в сети
member

Зарегистрирован: 02 авг 2010, 18:54
Сообщения: 26
Откуда: MSK
1) Я честно говоря, с Hyper-V не работал. Но по обзорам производительности (/количестве внедрений) Hyper-V уступает VMWare ESXi. Какие в нашем случае у Hyper-V будет преимущества?
Почти наверняка на этих же лезвиях будут стоять дополнительно ВМ Linux и FreeBSD, с ними видимо VMWare будет работать лучше, чем Hyper-V. Потом как-то перспективно делать все на виртуализации и облачной структуре, нет?
2) У нас корзина hp bladesystem c7000, обмен между лезвиями-корзиной идет по Infiniband и какие проблемы будут у гипервизора ESXi в данном случае?
О каких именно акселераторах идет? Что имеется в виду?
Данные они могут и не хранить, но данные хранятся на виртуальном хранилище VMWare (область на СХД) и в чем тут негативная сторона?
Дело в том, что это кластер будет работать on-demand: получается, что при кластере в идле лезвия будут просто простаивать, а при виртуализации эти ресурсы могут быть высвобождены для других ВМ.
Какая оценочная (приблизительно) потеря производительности при сравнении с установкой HPC-кластера на голое железо?

kim_aa писал(а):
rhiannon писал(а):
Да, я знаю про узел диспетчеризации, просто делать часть серверов на ESXi, часть на голом железке, как-то странно. Так какая может быть потеря производительности от установки HPC на ВМ?

Вопрос по установке HPC: как лучше делать купить Windows Server 2008 Standard x64 и поставить на него HPC Pack, или ставить сразу Windows HPC 2008 R2? Какие плюсы/минусы?


1) А зачем вам ESXi? Тут выгоднее использовать Hyper-V.
2) Основной затык в использовании Гипервизоров это:
- требование наличия низколатентного высокоскоростного соединения между нодами, по простому Infiniband, которую гипервизоры не поддерживают;
- затруднен проброс в виртуалки всяческих акселераторов (не умеют гипервизоры их виртуализовать)
- сама архитектура HPC требует, чтобы ноды были одинаковые и данных на себе не хранили, поэтому нет особого смысла вводить доп. слой виртуализации.
- в любом случае виртуализация "отьест" производительность, а в случае HPC это главное.


Вернуться к началу
 Профиль  
 
СообщениеДобавлено: 25 янв 2013, 08:29 
Не в сети
Сотрудник Тринити
Сотрудник Тринити
Аватара пользователя

Зарегистрирован: 14 ноя 2003, 17:25
Сообщения: 13040
Откуда: СПб, Екатеринбург
kim_aa писал(а):
ыыы. Так непосредственно вычислительной HPC ноде, HA даром не сдался. Вычислительных нод много (ближайший аналог NLB-нода) - одна сдохнет, ну и ладно - нагрузка на другую переедет.
HA нужен только для ноды которая диспечеризацией занимается.

Что значит "ыыы"? Думаешь я не знаю, как строится ХПЦ кластер? Я не понимаю, зачем ставить вмварь, внутрь него пихать Винду и туда уже наматывать ХПЦ кластеризацию. Виртуализация сама по себе отъест часть ресурсов. А ХПЦ МС кластер можно построить и без нее.

_________________
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru


Вернуться к началу
 Профиль  
 
СообщениеДобавлено: 25 янв 2013, 08:35 
Не в сети
Сотрудник Тринити
Сотрудник Тринити
Аватара пользователя

Зарегистрирован: 14 ноя 2003, 17:25
Сообщения: 13040
Откуда: СПб, Екатеринбург
kim_aa писал(а):
1) А зачем вам ESXi? Тут выгоднее использовать Hyper-V.
2) Основной затык в использовании Гипервизоров это:
- требование наличия низколатентного высокоскоростного соединения между нодами, по простому Infiniband, которую гипервизоры не поддерживают;
- затруднен проброс в виртуалки всяческих акселераторов (не умеют гипервизоры их виртуализовать)
- сама архитектура HPC требует, чтобы ноды были одинаковые и данных на себе не хранили, поэтому нет особого смысла вводить доп. слой виртуализации.
- в любом случае виртуализация "отьест" производительность, а в случае HPC это главное.

Андрей, какой смысл в ХПЦ кластере городить огород с Гипер-Ви? Почему не сделать на обычных Виндовых серверах? Одну простую машинку под управлялку и несколько под сам кластер. Внешняя СХД тут особо не нужна, разве что хранить много данных.

_________________
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru


Вернуться к началу
 Профиль  
 
СообщениеДобавлено: 25 янв 2013, 08:37 
Не в сети
Сотрудник Тринити
Сотрудник Тринити
Аватара пользователя

Зарегистрирован: 14 ноя 2003, 17:25
Сообщения: 13040
Откуда: СПб, Екатеринбург
rhiannon писал(а):
1) Я честно говоря, с Hyper-V не работал. Но по обзорам производительности (/количестве внедрений) Hyper-V уступает VMWare ESXi. Какие в нашем случае у Hyper-V будет преимущества?
Почти наверняка на этих же лезвиях будут стоять дополнительно ВМ Linux и FreeBSD, с ними видимо VMWare будет работать лучше, чем Hyper-V. Потом как-то перспективно делать все на виртуализации и облачной структуре, нет?

Э, начали с МС ХПЦ кластера, а идем к виртуалках на Линуксе и БСД. Что-то я потерялся.

_________________
С уважением Геннадий
ICQ 116164373
eburg@trinitygroup.ru


Вернуться к началу
 Профиль  
 
СообщениеДобавлено: 25 янв 2013, 10:24 
Не в сети
member

Зарегистрирован: 02 авг 2010, 18:54
Сообщения: 26
Откуда: MSK
Stranger03 писал(а):
rhiannon писал(а):
1) Я честно говоря, с Hyper-V не работал. Но по обзорам производительности (/количестве внедрений) Hyper-V уступает VMWare ESXi. Какие в нашем случае у Hyper-V будет преимущества?
Почти наверняка на этих же лезвиях будут стоять дополнительно ВМ Linux и FreeBSD, с ними видимо VMWare будет работать лучше, чем Hyper-V. Потом как-то перспективно делать все на виртуализации и облачной структуре, нет?

Э, начали с МС ХПЦ кластера, а идем к виртуалках на Линуксе и БСД. Что-то я потерялся.


Я говорю о том, что на этой корзине возможно появятся дополнительные сервисы, кроме HPC-кластера. Если HPC сервера будут стоять на каждом лезвии, невозможно будет развернуть дополнительные, не HPC-службы. А в случае виртуализации можно сделать больше ВМ, чем лезвий.
Потом когда стоит корзина, то просто напрашивается идея с гипервизором. Виртуализация дает очень большую гибкость в проектировании и перспективы, а на голое железо - это мне кажется уже прошлый век, как Вы думаете?

Все такие: сколько мы потеряем в производительности в случае одинакового количества физических нод (на лезвиях) и виртуальных нод (на ВМ)?


Вернуться к началу
 Профиль  
 
СообщениеДобавлено: 25 янв 2013, 11:59 
Не в сети
member

Зарегистрирован: 02 авг 2010, 18:54
Сообщения: 26
Откуда: MSK
Можно очень кратко, без детализации описать процесс развертывания HPC-кластера:
прям по пунктам, что на что ставится, какие лицензии нужно закупать? Там кажется HPC Pack ставится поверх Windows Server 2008 R2 x64, да?
Опять же какие фичи у HPC в случае установки на Standard или Enterprise?


Вернуться к началу
 Профиль  
 
СообщениеДобавлено: 25 янв 2013, 12:50 
Не в сети
Сотрудник Тринити
Сотрудник Тринити
Аватара пользователя

Зарегистрирован: 24 ноя 2011, 16:30
Сообщения: 120
Откуда: Санкт-Петербург
Stranger03 писал(а):
Что значит "ыыы"? Думаешь я не знаю, как строится ХПЦ кластер? Я не понимаю, зачем ставить вмварь, внутрь него пихать Винду и туда уже наматывать ХПЦ кластеризацию. Виртуализация сама по себе отъест часть ресурсов. А ХПЦ МС кластер можно построить и без нее.


"ЫЫЫ" было не к твоему посту, а к предложению использовать гипервизор. Я, как и ты не понимаю "нафига козе баян", поэтому и ЫЫЫ.

Предложение же использовать Hyper-V касалось только ноды диспечеризации (и то, как вариант реализации отказоустойчивости. Например, не все сервера лицензирования "HPC-руемого" ПО имеют встроенные средства отказоустойчивости). Вобще же, проектирование "универсальной" HPC-фермы, без учета используемого приложения, это, ИМХО, нечто сродни вечному двигателю или философскому камню.


Вернуться к началу
 Профиль  
 
СообщениеДобавлено: 25 янв 2013, 12:55 
Не в сети
Сотрудник Тринити
Сотрудник Тринити
Аватара пользователя

Зарегистрирован: 24 ноя 2011, 16:30
Сообщения: 120
Откуда: Санкт-Петербург
rhiannon писал(а):
Можно очень кратко, без детализации описать процесс развертывания HPC-кластера:
прям по пунктам, что на что ставится, какие лицензии нужно закупать? Там кажется HPC Pack ставится поверх Windows Server 2008 R2 x64, да?
Опять же какие фичи у HPC в случае установки на Standard или Enterprise?


http://technet.microsoft.com/en-us/libr ... 10%29.aspx


Вернуться к началу
 Профиль  
 
Показать сообщения за:  Поле сортировки  
Начать новую тему Ответить на тему  [ Сообщений: 18 ]  На страницу 1, 2  След.

Часовой пояс: UTC + 3 часа [ Летнее время ]


Кто сейчас на конференции

Сейчас этот форум просматривают: нет зарегистрированных пользователей и гости: 1


Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете добавлять вложения

Найти:
Перейти:  
Создано на основе phpBB® Forum Software © phpBB Group
Русская поддержка phpBB