24小时热门版块排行榜    

Znn3bq.jpeg
查看: 654  |  回复: 9
当前主题已经存档。
当前只显示满足指定条件的回帖,点击这里查看本话题的所有回帖

fineren

木虫 (正式写手)

[交流] 【求助】如何在计算机集群上做并行计算

有专门用来做高斯计算的集群,24个节点,Linux系统。但管理机器的人不知道怎么做并行计算,求助做过的xd,用那个secureCRT登录主机,如何让比如5个节点同时计算?谢谢

[ Last edited by zzgyb on 2008-10-16 at 15:30 ]
回复此楼
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

fineren

木虫 (正式写手)

我看了别人写的,输入以下:
echo “Tsnet.Node.lindarsharg: ssh” >~/.tsnet.config
export GAUSS_LFLAGS=‘ -nodelist “Node1 Node2”’
export GAUSS_EXEDIR=/home/gauss/g03/linda-exe:$GAUSS_EXEDIR

gjf文件里把并行机器的个数和单个机器cpu个数标出:
%nprocl=2
%nprocs=1

然后提交:
g03 ××.gjf &
但只在一个节点上计算。

另外有个问题,用我们那集群的计算机算几个小时,有时算几分钟,计算就自己停止了。log文件没有报错,也没显示已算完。这是咋回事?
5楼2008-10-16 20:32:43
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
查看全部 10 个回答

richard58272

金虫 (正式写手)

★ ★
zzgyb(金币+2,VIP+0):谢谢你的参与,欢迎再次光临计算模拟版!
建议你问一下专门做高斯或分子动力学的教授,我知道有一个,他自己管理机群,不过他不上小木虫。你可以给他发电子邮件:严六明,上海大学化学系教授,liuming.yan@shu.edu.cn
2楼2008-10-16 16:20:39
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

abbott

金虫 (著名写手)

不要用QQ问我东西

如果只做G03的并行的话,我可以帮你配置!

我只提供最为简单的。

但是如果是多用户使用的话,需要别的服务配置!

邮件abbott.cn@gmail.com  如果你有更好的解决办法,大家一起交流啊!
Chemistry[]==[]Chem[]is[]try!!!
4楼2008-10-16 19:02:23
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

abbott

金虫 (著名写手)

不要用QQ问我东西

我可以提供一些参考

如果是并行,跨节点的,比如你的文件中用到%nproclinda=2,那么你必须是用g03l tst.com& 来提交你的作业,
如果你仅仅使用%nprocshared=n, 那个是SMP(共享内存的方式, 适用于一个主板上有一个CPU, 多核心的也可以,几个物理CPU也可以), 这样的作业,提交用g03 tst.com&

如果并行是通过linda进行的,那么你的log文件中的时间仅仅记录的是最后一个link所用的时间,并不是整个作业的时间消耗。


在计算进行过程中,可以并行的link,你会在参与的几点上面看到lnnn.exel的进程,但是这个进程运行的时间不一定和主节点上的一样。

举个例子,如果你的主节点,除了做管理之外,还参与计算,那么由于主节点担负的load比其他的节点多, 他运行一个进程的时间就相对的长一点, 这样就是你看到的一个可以并行的link,其他的节点上是不动的,只有主节点上在运作。 可是,实际上,由于其他的slave节点,计算资源较多,已经完成了本次进程的并行后的部分工作,所以在等待主节点或者其他节点计算完成后,合并结果,获取数据。

可以说,如果你的cluster中,没有一个很好的load balance系统,那么最好这样处理。
单独一个节点,用来做管理,提供各种服务,比如你能用到的NIS,NFS,同时做一个磁盘阵列,主节点兼作存储节点,而且他的slave node 都用做计算节点。

但是同是也要明确,高斯中还有也能多不能并行的link ,那么就要求,运行不能并行的link的机器,性能一定要强,负责,在不能并行的节点上,会浪费很多时光的。


还有一个问题,尽量的让计算过程中,不要使用SWAP,过多的使用SWAP,回导致计算性能下降。应该很明确,CPU和RAM交换数据的速度绝对比和磁盘交换数据的速度快很多。

一般而言,主要承担计算的节点上的内存余量(系统正常运作后,剩余的物理内存,不包含SWAP空间)的95%都可以用于计算的内存设置。

以上的东西,只是个人的一点点看法,不正确指出,请高手斧正!


abbott.cn@gmail.com
刚刚开始一个人摆弄G03的并行,希望能和大家多多交流!
Chemistry[]==[]Chem[]is[]try!!!
6楼2008-10-16 23:49:22
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
普通表情 高级回复 (可上传附件)
最具人气热帖推荐 [查看全部] 作者 回/看 最后发表
[考研] 277求调剂 +17 倪建设 2026-04-06 17/850 2026-04-10 08:11 by kangsm
[考研] 材料与化工371求调剂 +17 陪琳看海 2026-04-04 18/900 2026-04-10 07:51 by 314126402
[考研] 一志愿中南大学物理学,英一66,求调剂 +3 长烟旖旎 2026-04-08 4/200 2026-04-09 21:27 by wutongshun
[考研] 0703调剂 +18 拾玖壹 2026-04-04 20/1000 2026-04-09 20:53 by zhouxiaoyu
[考研] 一志愿鲁东大学071000生物学学硕初试分数276求调剂 +19 慕绝cc 2026-04-09 23/1150 2026-04-09 17:14 by 段伟艳
[考研] 085501机械英二77总分294求调剂,接受跨专业学习 +6 守法公民亓纪 2026-04-08 6/300 2026-04-09 15:55 by wp06
[考研] 322求调剂,08工科 +3 今天是个小号 2026-04-08 3/150 2026-04-09 15:53 by wp06
[考研] 288求调剂 +15 没有答案_ 2026-04-05 15/750 2026-04-09 10:22 by 5268321
[考研] 320分人工智能调剂 +9 振—TZ 2026-04-03 10/500 2026-04-08 19:56 by 振—TZ
[考研] 277求调剂 +4 考研调剂lxh 2026-04-06 6/300 2026-04-08 10:40 by 逆水乘风
[考研] 319分085702安全工程求调剂 +6 rious 2026-04-05 6/300 2026-04-07 09:42 by jp9609
[考研] 312求调剂 +4 LR6 2026-04-06 4/200 2026-04-07 08:42 by jp9609
[考研] 071000生物学调剂 +7 拉提桃 2026-04-06 7/350 2026-04-06 18:55 by 52305043001
[考研] 机械专硕274求调剂,不挑专业学校 +6 泛泛2333 2026-04-05 8/400 2026-04-06 18:06 by 泛泛2333
[考研] 081200-11408-276学硕求调剂 +5 崔wj 2026-04-05 5/250 2026-04-06 15:40 by lin-da
[考研] 0703求调剂383分 +9 W55j 2026-04-03 9/450 2026-04-06 06:50 by houyaoxu
[考研] 调剂 +3 李广火 2026-04-05 3/150 2026-04-05 18:57 by 蓝云思雨
[考研] 325求调剂 +4 春风不借意 2026-04-04 4/200 2026-04-04 22:08 by 啵啵啵0119
[考研] 一志愿北交大材料工程总分358 +6 cs0106 2026-04-03 6/300 2026-04-04 11:20 by w_xuqing
[考研] 求调剂 +8 akdhjs 2026-04-03 8/400 2026-04-03 18:17 by 戴维ING
信息提示
请填处理意见