24小时热门版块排行榜

返回列表

当前只显示满足指定条件的回帖，点击这里查看本话题的所有回帖

风间的记忆

铁杆木虫 (著名写手)

应助: 77 (初中生)
金币: 6530.5
散金: 20
红花: 10
帖子: 1170
在线: 1897.4小时
虫号: 1069274
注册: 2010-08-04
性别: GG
专业: 计算机软件

[交流] 【原创】买了Infiniband，实际上并没有用到Infiniband你知道吗？已有8人参与

现在的集群建设都喜欢上Infiniband，这代表着专业和高速，但很少有人知道实际

上大多数计算软件并不支持Infiniband的协议，实际上投入了大量资金却没有真正的利

用起来。

   以需要编译的VASP为例，但如果并行环境非支持Infiniband或者编译的时候不加入

Infiniband参数，就无法走Infiniband本身的协议，走的是IP OVER IB的协议。

      那我们再解释下什么是Infiniband协议和IP OVER IB的区别？

      ① Infiniband网络可以看成高速公路，而采用Infiniband协议就好比使用奔驰车运送数据，而采用IP OVER IB 就好比使用QQ运送数据（这个比较可能不太贴切，速度快慢除了和协议有关还和计算机网络中很多底层东西相关，很难一句两句解释清楚）

      ②因为TCP/IP是非可靠协议，所以传输的数据有大量的校验信息，而Infiniband协议是可靠协议，校验信息比较少。这样同样运载能力的一辆车，运输TCP/IP协议的数据包的时候真正数据只有70%，而运输Infiniband协议的数据包的时候真正的数据可以是95%。

      至于如何判断是否走Infiniband本身的协议比较复杂，比较表面化的就是在MPIRUN运行VASP此类程序时是否加入IB的协议或者安装的是否支持Infiniband协议的MPI版本（MPICH肯定是不支持的）。

      而另外一些比如FLUENT等商业软件也同样需要做开发才能支持IB本身的协议。

      抛砖引玉，以待来人！

回复此楼

» 猜你喜欢

求国际会议网站已经有1人回复
求取一些关于纳米材料和纳米技术相关的英文PPT。已经有0人回复
物理学I论文润色/翻译怎么收费? 已经有165人回复
【复旦大学】二维材料方向招收2026年博士研究生1名已经有0人回复
北京纳米能源与系统研究所王中林院士/曹南颖研究员课题组2026级硕/博/博后招生已经有10人回复
荷兰Utrecht University超快太赫兹光谱王海教授课题招收2026 CSC博士生已经有19人回复
反铁磁体中的磁性切换：两种不同的机制已成功可视化已经有0人回复
26申博推荐：南京航空航天大学国际前沿科学研究院光学方向招收博士生！已经有0人回复
求标准粉末衍射卡号 ICDD 01-076-1802 已经有0人回复

九州浩淼，任其东西，明日何在，但随我意。

1楼2010-08-09 09:49:58

已阅回复此楼关注TA 给TA发消息送TA红花 TA的回帖

wangyujia

木虫 (正式写手)

应助: 6 (幼儿园)
金币: 1704.3
散金: 1042
红花: 5
帖子: 369
在线: 79.7小时
虫号: 459079
注册: 2007-11-14
性别: GG
专业: 凝聚态物性 II ：电子结构

★ ★ ★ ★ ★ ★
小木虫(金币+0.5):给个红包，谢谢回帖交流
mingdong(金币+5):感谢交流！ 2010-09-06 16:29:44

引用回帖:

Originally posted by 风间的记忆 at 2010-09-03 15:30:24:

我想你只明白了一部分
如果你的网页监控系统没有专门针对IB协议的选择
你看到的流量只是TCP/IP的流量
根本看不到IB的流量

也就是说如果如此
如果你真正使用的是IB的协议
在你的流量监控中是看不到任 ...

可能是我没有写清楚。我投了一个2节点的任务，用到了问题节点，结果这两个节点的流量都很高(M级)。若是任务在其他节点间并行，那么显示的流量很低(K级)。
然后工程师过来把IB线拔掉了，任务没有影响，流量依旧，说明这个任务是通过千兆网卡来并行的。然后他把IB线连上，把网线拔掉，结果任务就被终止了，更加说明这个节点的IB卡没有工作。
你的想法是对的，“即使用不到IB 也至少能用到IP OVER IB！”