Обмозговать сервер.
Модераторы: Trinity admin`s, Free-lance moderator`s
Обмозговать сервер.
Задача - компилировать до 50 000 исполняемых файлов за раз.
Нынешний "сервер" на обычном пне4 и с 2 Гб памяти управляется за примерно 3 недели.
Хочу уложить в невеликий бюджет решение вроде
двухпроцессорной матери
пары Quad Xeon
максимального, если можно - 65 Гб объёма ОЗУ
дисковая и видеоподсистемы не критичны. главное - скорость компиляции.
Предложите готовое или подскажите на что именно смотреть ?
Можно в аську 7551744.
Пока дума вот что ставить:
MB S5000VSA4DIMMR, 2xLGA 771, S5000V, FSB1333, 4DDR II SDR, 2xGbitLAN,2PCI-X, SATA-RAID,EATX
[BOX] Quad-Core Intel Xeon 5310, 1.6ГГц, LGA771, 8M, FSB1066МГц *2
2048Mb PC2-5300 667MHz DDR2 ECC FB-DIMM Kingston [KVR667D2D4F5/2G] *4
Есть опыт использования подобного ?
Нынешний "сервер" на обычном пне4 и с 2 Гб памяти управляется за примерно 3 недели.
Хочу уложить в невеликий бюджет решение вроде
двухпроцессорной матери
пары Quad Xeon
максимального, если можно - 65 Гб объёма ОЗУ
дисковая и видеоподсистемы не критичны. главное - скорость компиляции.
Предложите готовое или подскажите на что именно смотреть ?
Можно в аську 7551744.
Пока дума вот что ставить:
MB S5000VSA4DIMMR, 2xLGA 771, S5000V, FSB1333, 4DDR II SDR, 2xGbitLAN,2PCI-X, SATA-RAID,EATX
[BOX] Quad-Core Intel Xeon 5310, 1.6ГГц, LGA771, 8M, FSB1066МГц *2
2048Mb PC2-5300 667MHz DDR2 ECC FB-DIMM Kingston [KVR667D2D4F5/2G] *4
Есть опыт использования подобного ?
- exLH
- Сотрудник Тринити
- Сообщения: 5061
- Зарегистрирован: 11 фев 2004, 15:49
- Откуда: Москва
- Контактная информация:
Vasik
Т.е. пока писали сообщение в форум, решили уменьшить объем памяти в 8 раз? Тоже вариант.
Все равно лучше на другом чипсете (5000P) все делать:
Supermicro X7DBE + 4x2GB + 2x5310 + SC745TQ-800 + дисков (я бы рекомендовал SAS) сколько требуется (мнение, что дисковая подсистема не важна скорее всего ошибочное).
Т.е. пока писали сообщение в форум, решили уменьшить объем памяти в 8 раз? Тоже вариант.
Все равно лучше на другом чипсете (5000P) все делать:
Supermicro X7DBE + 4x2GB + 2x5310 + SC745TQ-800 + дисков (я бы рекомендовал SAS) сколько требуется (мнение, что дисковая подсистема не важна скорее всего ошибочное).
-
- Advanced member
- Сообщения: 229
- Зарегистрирован: 25 окт 2005, 09:30
- Откуда: Краснодар
- Stranger03
- Сотрудник Тринити
- Сообщения: 12979
- Зарегистрирован: 14 ноя 2003, 16:25
- Откуда: СПб, Екатеринбург
- Контактная информация:
А вопрос, ваш компилятор умеет паралелить? Да и что-то у меня есть сомнения, что если современный П4 компилит 3-и дня, то пара 5310 процов управятся хотя бы за пару часов. Ядро одинаковое, ну в 8-мь раз получите скорость компиляции. за 6-10 часов?Vasik писал(а):По последним данным, компиляция забирает до 512 Мб. вот и думаю - больше чем 512*8 мне вроде и не надо, но пусть небольшой запасец будет...
-
- Advanced member
- Сообщения: 229
- Зарегистрирован: 25 окт 2005, 09:30
- Откуда: Краснодар
make умеет, этого достаточно:А вопрос, ваш компилятор умеет паралелить?
-j jobs
Specifies the number of jobs (commands) to run simul-
taneously. If there is more than one -j option, the
last one is effective. If the -j option is given
without an argument, make will not limit the number of
jobs that can run simultaneously.
Другое дело, что вся эта параллельность идёт лесом, если вся работа упрётся в диски. Компиляция - работа с большим количеством мелких файлов, к тому же с конкурентным доступом. Поэтому scsi/sas required.
- Stranger03
- Сотрудник Тринити
- Сообщения: 12979
- Зарегистрирован: 14 ноя 2003, 16:25
- Откуда: СПб, Екатеринбург
- Контактная информация:
А, понятно про какой компилятор идет речь. Бюджет какой есть? Несколько вариантов кину в почту для питерских коллег, .Andrey N. Oktyabrski писал(а):Другое дело, что вся эта параллельность идёт лесом, если вся работа упрётся в диски. Компиляция - работа с большим количеством мелких файлов, к тому же с конкурентным доступом. Поэтому scsi/sas required.
- Stranger03
- Сотрудник Тринити
- Сообщения: 12979
- Зарегистрирован: 14 ноя 2003, 16:25
- Откуда: СПб, Екатеринбург
- Контактная информация:
-
- Advanced member
- Сообщения: 229
- Зарегистрирован: 25 окт 2005, 09:30
- Откуда: Краснодар
а не интересно ли вам будет побесодовать по вопросу удалённой компиляции на нашем кластере ?
если интерес есть - стучитесь ко мне в icq или звоните
327 59 60 (доп. 206) Сергей Тараненко.
P.S. у меня на gentoo всё в 256 потоков собирается
P.P.S к тому же я смотрю вы тоже на обите сидите - считай локалка общая
если интерес есть - стучитесь ко мне в icq или звоните
327 59 60 (доп. 206) Сергей Тараненко.
P.S. у меня на gentoo всё в 256 потоков собирается
P.P.S к тому же я смотрю вы тоже на обите сидите - считай локалка общая
Re: Обмозговать сервер.
Только сегодня заглянул в эту ветку... Я отттуда ушёл, но на 8-ми машинках компилируют. Отдал контакт.
Кто сейчас на конференции
Сейчас этот форум просматривают: нет зарегистрированных пользователей и 18 гостей