Параллельные вычисления в Cfx (Настройка)

[Dick 0]

есть сервер и не один с 8 гигами оперативки на Win Server 2003 Enterpr R2

[Miki 3]

R2 или R2 x64 edition ?

процы с технологией EM64T ? если да, то по любому R2 x64

если процы такие, но стоит обычная R2 некоторые проги расчетные фиговенько ускоряются

[Dick 0]

хттп://www.microsoft.com/windowsserver2003/evaluation/sysreqs/default.mspx

вот что там пишут:

Microsoft Windows Server 2003 Enterprise Edition

Requirement

Computer and processor

133-MHz or faster processor for x86-based PCs; 733-MHz for Itanium-based PCs; up to eight processors supported on either the 32-bit or the 64-bit version

Memory

128 MB of RAM minimum required; maximum: 32 GB for x86-based PCs with the 32-bit version and 64 GB for Itanium-based PCs with the 64-bit version

Other

Windows Server 2003 Enterprise Edition, 64-bit version is compatible only with 64-bit Intel Itanium-based systems and cannot install on 32-bit systems

А вот какие бывают серваки:

хттп://www.aq.ru/table_srv_telecom.html

[Miki 3]

ну вообще то есть вот это

<noindex>http://www.microsoft.com/windowsserver2003...enterprise.mspx</noindex>

память до 1 ТБ и 8 процов

но главное что оно тянет нормальные процессора напр Xeon 5*** и 6***, а не древний хлам как стандартный server2003

[digger 0]

WS2003 видит до 64 ГБ, используется режим PAE ксеонов (т.е. расширение адресов до 40 бит или что-то около того, точно уже не помню). Но на сегодня надо использовать, естественно, R2 x64, а еще лучше Computer Cluster Server (или Compute Cluster Pack), им и сам ANSYS активно увлекается последнее время :-)

[Расчетчик 0]

Всем добрый день.

Господа, а кто нибудь работал с Opteron у которого процессоры имеют несколько ядер?

Я считаю задачу (5 500 000 узлов и 10000000 элементов, изотермический поток сжимаемого газа) на Opteron 2,4 ГГц с двумя одноядерными процессорами под управлением Red Hat Enterprise Linux 4, 10 Гб оперативки, а так же на кластере из 4 машин двухпроцессорных Opteron 2,4 ГГц с двумя ядрами в каждом процессоре оперативки по 4 Гб на машину итого 16 ядер, операционная система SuSe Enterprise Linux 10.

Как показывают тесты независимых компаний, ускорение по времени счета должно получиться порядка 8, однако я на своей задаче получаю ускорение порядка 4-х. Сеть в кластере собрана на основе Myrinet, при чем при счете на кластере обмен по сети между машинами в промежутке между итерациями занимает времени много меньше времени счета одной итерации при. Загрузка ядер во время итерации на кластере 100%.

Кто нибудь сталкивался с такой проблемой? Или может быть тестировал/настраивал такие кластера, в чем проблема? Почему не получется получить ускорение времени счета порядка 8? Поделитесь пожалуйста опытом.

[Cfduser 0]

Почему не получется получить ускорение времени счета порядка 8?

<{POST_SNAPBACK}>

Ускорение сильно зависит от задачи (некоторые процессы плохо паралелятся и на них не тестируют), от балансировки загрузки и от размера сетки. Для газодинамических задач оптимальная разбивка сетки порядка 2 млн элементов не процессор. При этом можно получить ускорение порядка 6 на 8 процессорах. Myrinet это круто. Но для типичных задач газодинамики достаточно Fast/Gigabit Ethernet. Тестировать и настраивать кластер должен тот, у кого он куплен.

[Расчетчик 0]

Ускорение сильно зависит от задачи (некоторые процессы плохо паралелятся и на них не тестируют), от балансировки загрузки и от размера сетки. Для газодинамических задач оптимальная разбивка сетки порядка 2 млн элементов не процессор. При этом можно получить ускорение порядка 6 на 8 процессорах.

А не может это быть связано с неоптимальной работы двух ядер?

Тестировать и настраивать кластер должен тот, у кого он куплен.

Ну вообще говоря кластер не куплен, а собран самостоятельно, но не мной а специалистами фирмы, в которой я работаю.

[Cfduser 0]

А не может это быть связано с неоптимальной работы двух ядер?

<{POST_SNAPBACK}>

Нет

Ну вообще говоря кластер не куплен, а собран самостоятельно, но не мной а специалистами фирмы, в которой я работаю.

<{POST_SNAPBACK}>

Тогда надо проверить кластер на линпаке. Если ускорение пропорцианально числу процессоров, то всё работает нормально.

[Расчетчик 0]

Тогда надо проверить кластер на линпаке.

Прошу прощения за невежество, а что такое "линпак"?

[Dick 0]

Друзья! У кого нормально работает распараллеливание в CFX!

Пришлите пожалуйста на мыло dick_chase#pisem.net инфу с двух компов - в CFX Launcher выберите в меню Show -> Show All. Все что напишет - скопируйте в текстовый файлик (инфу с ДВУХ компов). Спасибо!

[Tako 0]

Dick

Вы думаете, что такой важной информацией кто-то поделится?

Там же системная информация.

Лицензии на программы. Все флексэлемы. Айпишники, имена доменов.

Конкретизируйте вопрос. Например, только то, что относится к CFX

[Dick 0]

Конфиденциального там ничего нет.

Лицензии и флекслм - только путь и имя файла. Айпишник - внутренний, имя домена - тоже.

Интересует как раз системная инфа - операционка, сервиспаки, версии длл и тд и версия/патчи CFX.

[Miki 3]

по Opteron

имхо, дело в самих процах, пока что у меня нет на руках результатов тестов Xeon-ов (скоро будут)

но предварительно Opteron-ы как то фигово себя ведут. 4-х процессорная 8-ядерная SMP машина 2,8 ггц показала ускорение всего в 3 раза по сравнению с обычным Пнем D 3,4 2-ядерным.

[Расчетчик 0]

имхо, дело в самих процах,

А в операционке не может быть дело? Где то я краем уха слышал, что Linux не очень зорово работает с с памятью при наличии нескольких ядер?

[a_schelyaev 366]

2 Miki

>>но предварительно Opteron-ы как то фигово себя ведут. 4-х процессорная 8-ядерная SMP машина 2,8 ггц показала ускорение всего в 3 раза по сравнению с обычным Пнем D 3,4 2-ядерным.

Где-то год назад тестирование CFX на Оптеронах в Т-Платформах показало результаты как минимум аналогичные Зеонам. Причем, если Зеоны находились на одной плате то ускорение у них проседало. Нормально они жили друг с другом только если каждый стоял на отдельной материнке.

[aieln 0]

всем привет

на машинах с winXP SP2 при запуске как с host'a CFX будет выдавать каверзное сообщение

Terminal read: The handle is invalid нормальным английским или абракадаброй, зависит от языка винды

Это проблема описана здесь

<noindex>http://support.microsoft.com/kb/892099</noindex>

А отсюда можно скачать hotfix kb892099

<noindex>http://hotfix.xable.net/download/index.php...h/Windows%20XP/</noindex>

К сожалению я нашел фикс только для английских виндов для русского вроде нету,

но может плохо искал.

[Dick 0]

Спасибо за информацию!

[Miki 3]

Где-то год назад тестирование CFX на Оптеронах в Т-Платформах показало результаты как минимум аналогичные Зеонам. Причем, если Зеоны находились на одной плате то ускорение у них проседало. Нормально они жили друг с другом только если каждый стоял на отдельной материнке.

время идет, да и xeon xeon-у рознь , нужна конкретика модель проца, память, материнка, коннект.

а по факту сейчас есть следующая вещь

со стороны AMD: 4 проца 8 ядер 890 2,8 ггц

от intel Xeon 5160 4 проца 8 ядер 3ггц

памяти везде дофига . диски одинаковые scsi (но это мало влияет на CFX)

на amd sles10, на xeon RHES 4

при таком раскладе AMD почти в 2 раза медленней Xeon, если точнее то 1,89.

а в цене между прочим почти обратный расклад.

остальное додумайте сами.

полные результаты тестов (не только для CFX) скоро выйдут в открытые источники

[a_schelyaev 366]

Да уже все давно в сети:

<noindex>http://www.intel.com/products/processor/xe...itive_guide.pdf</noindex>

ТОлько по стоимости лучше выводить не стоимость процессора, а всей системы со всей инфраструктурой.