24小时热门版块排行榜    

查看: 2603  |  回复: 10

bhcsmay

金虫 (正式写手)

[交流] 【求助】关于服务器多节点并行利用效率问题

用castep计算的时候,使用8个节点的服务器,虚拟128核,
计算量足够大,但服务器只支持4个节点并行,
另外的四个节点两个两个并行可以,同时四节点并行就利用率非常低,
如果任务再大的情况需要八节点并行,
也是发生一样的问题利用率非常低速度非常慢,
但是减少节点数又不能计算任务直接掉下,
请教计算机高手,这个问题该如何解决?
回复此楼
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

bhcsmay

金虫 (正式写手)

自己顶一下,求助啊求助......
2楼2010-10-25 16:30:11
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

bhcsmay

金虫 (正式写手)

自己顶啊顶
3楼2010-10-26 21:59:26
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

沙风

铁杆木虫 (正式写手)

有为青年

呵呵,自己在这顶着玩呢
4楼2010-10-27 10:30:05
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

suyi20466975

至尊木虫 (正式写手)

巾帼将军

支持楼主,希望有人能回答这个问题
Everythingwillbechanged!
5楼2010-10-27 10:31:15
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

风间的记忆

铁杆木虫 (著名写手)

★ ★ ★ ★
aylayl08(金币+4):谢谢建议 2010-10-27 20:13:12
bhcsmay(金币+10):谢谢,我们用的是自己的服务器,Linux系统,最初可以并行节点,现在不明原因不可以了。 2010-10-28 08:34:59
1)多线程:虚拟128个核?你开多线程了?如果开了,关掉。高性能计算开多线程只会降低计算效率
2)网络和存贮:并行效率和网络、中间数据的存储处理都有关系。估计网络是很难更改,可以考虑管理网络和计算网络分开,同时计算的中间数据尽量写在本地,减少网络瓶颈压力
3)操作系统和并行环境:一些新版本的操作系统可以利用新CPU的特性,比如INTEL的QPI等,同时并行环境安装也是有区别的。
4)LINUX OR WIN:理论上讲LINUX的效率要高于WINDOWS 10-15%,如果是WIN可以考虑换LINUX!
九州浩淼,任其东西,明日何在,但随我意。
6楼2010-10-27 10:50:27
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

沙风

铁杆木虫 (正式写手)

有为青年

楼上的说的很有道理
7楼2010-10-27 11:46:44
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

bhcsmay

金虫 (正式写手)

谢谢5楼的回答,我们用的是自己的服务器,Linux系统,确实开了超线程。
但是最初可以并行节点,现在不明原因不可以了。

[ Last edited by bhcsmay on 2010-10-28 at 09:09 ]
8楼2010-10-28 08:35:29
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

风间的记忆

铁杆木虫 (著名写手)


cenwanglai(金币+1):谢谢回复! 2010-10-28 14:33:38
引用回帖:
Originally posted by bhcsmay at 2010-10-28 08:35:29:
谢谢5楼的回答,我们用的是自己的服务器,Linux系统,最初可以并行节点,现在不明原因不可以了。

不客气,不能并行,这个就很难说清楚了
最可能的原因是并行环境出问题了
九州浩淼,任其东西,明日何在,但随我意。
9楼2010-10-28 09:06:42
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

月影

银虫 (初入文坛)

bhcsmay(金币+5):这个我同意,当然不是越多越快的,我说的问题前提是之前测试这些节点并行计算这样大小的体系是合适的,计算速度也很好,后来由于未知原因导致不能继续并行计算,不过5.5的改进确实值得期待。 2010-11-01 17:30:46
曾经在某群里有人认为CPU越多越就越快,还很鄙视的说我不懂什么叫并行计算,呵呵。
从实际计算来看,有些时候节点越多,效率反而更低。
节点之间的交换速度,远远达不到CPU内不同核心间的速度。超过某个临界值后,越多当然就越慢了。除此之外,也有castep软件自身的原因,这涉及到K点计算量在节点分配问题。
新版5.5的castep似乎可以开始自动分配了,值得一试
10楼2010-11-01 17:09:47
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 bhcsmay 的主题更新
普通表情 高级回复 (可上传附件)
信息提示
请填处理意见