24小时热门版块排行榜    

查看: 557  |  回复: 2

tengh

木虫 (小有名气)

[求助] 集群存储问题

大家好,我们实验室目前有16台4u的服务器,都是自己组装的(分批购买的),配置:cpu E5-2630,内存有32G和64G两种,通过infiniband交换机互联,自己在头结点(登录节点)上用3块2T硬盘组建了raid0作为公共存储,NFS共享给其它节点。
系统:centos6.3
任务管理系统:torque+maui

目前有个问题,在任务有大量数据读写时,头结点内存几乎耗尽,并且反应超慢,运行的nfsd进程有99个。load average将近达到100。

这个可能就是I/O瓶颈吧,不知道如何能够经济的提高整个系统磁盘的I/O性能?

忘各位给支个招,谢谢!

短期内不打算购买磁盘阵列组建lustre文件系统及添加专门的I/O节点。

[ Last edited by tengh on 2013-8-5 at 16:30 ]
回复此楼

» 猜你喜欢

» 本主题相关价值贴推荐,对您同样有帮助:

已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

yunfan951

铁杆木虫 (著名写手)

【答案】应助回帖


感谢参与,应助指数 +1
csgt0: 金币+1, 谢谢 2013-08-07 18:06:11
3块2T硬盘,这个貌似转速低,使用哪种接口?
另外最好把存储节点、RAID卡信息详细列一下
2楼2013-08-07 14:32:38
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

tengh

木虫 (小有名气)

引用回帖:
2楼: Originally posted by yunfan951 at 2013-08-07 14:32:38
3块2T硬盘,这个貌似转速低,使用哪种接口?
另外最好把存储节点、RAID卡信息详细列一下

谢谢!
硬盘是SATA 6G ST 7200转,没有用外插raid卡,用的是主板的,测试过节点间传输5百多兆。
不知如果换成sas的性能有多大提升,我看网上说sas的IOPS能提高一倍?
还有我看到SAS硬盘有7200转的,价格比sata的企业版的盘子贵不到一倍,不知道大家有没有用过的,效果怎样?
3楼2013-08-08 09:28:23
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 tengh 的主题更新
最具人气热帖推荐 [查看全部] 作者 回/看 最后发表
[基金申请] 帮忙看看fileCode +4 wwncly 2026-08-10 7/350 2026-08-10 21:24 by Tide man
[基金申请] filecode +8 documentary 2026-08-10 8/400 2026-08-10 19:20 by loufangrui
[基金申请] 确定了,国自然21号放榜 +6 布布和一二 2026-08-10 7/350 2026-08-10 19:15 by 2000zf36392
[基金申请] 关于代码变化问题,想知道的进来 +17 且听虎啸 2026-08-07 24/1200 2026-08-10 18:35 by zhangduo2008
[基金申请] 为什么网上很多人说本周 12号出结果 +3 瞬息宇宙 2026-08-10 3/150 2026-08-10 18:27 by Tide man
[基金申请] 关于Filecode分析方法 +3 majunge000 2026-08-10 3/150 2026-08-10 15:46 by lch2012
[基金申请] 应该是93bebmhtak前后十一个字符比较关键 +14 Lanmanbaby 2026-08-09 22/1100 2026-08-10 14:57 by wwncly
[基金申请] 奇怪,两个人的filecode固定段从头到尾一模一样 +4 布布和一二 2026-08-10 4/200 2026-08-10 14:50 by 医学老男孩
[基金申请] 据悉今年马上要出结果了 +7 瞬息宇宙 2026-08-10 8/400 2026-08-10 12:42 by Vivilian
[基金申请] fileCode有新解读? +10 Tide man 2026-08-08 18/900 2026-08-09 12:55 by 仁砚薪传
[基金申请] 关于filecode,很负责任的告诉大家 +6 爱看书的可乐 2026-08-08 7/350 2026-08-08 22:13 by a_niu
[基金申请] 关于豆爷回答的JTJC与%2F数量 +5 yang182083 2026-08-06 7/350 2026-08-08 18:29 by zhanghaozhu
[基金申请] 固定端突然变了,今天 +6 archvillain 2026-08-06 10/500 2026-08-07 16:03 by 医学老男孩
[基金申请] filecode变化情况 +6 布布和一二 2026-08-07 22/1100 2026-08-07 14:45 by 且听虎啸
[基金申请] 大家散了吧,后缀研究没有意义,别浪费时间了,过好目前的每一天,不要焦虑 +5 Tide man 2026-08-06 7/350 2026-08-07 13:11 by 医学老男孩
[基金申请] filecode +14 等待解的谜 2026-08-06 19/950 2026-08-07 12:20 by wlwhappy
[基金申请] filecode +8 布布和一二 2026-08-06 11/550 2026-08-06 20:41 by tangpu318
[基金申请] 求各位大神看下 100+6 hpkpkpkp 2026-08-05 33/1650 2026-08-06 14:49 by zhiyanjiang
[基金申请] 有没有H口的?有收到消息的吗? +3 超级海虾 2026-08-04 3/150 2026-08-04 17:26 by 学教育滴
[基金申请] 纯娱乐,不喜欢勿喷 +7 Tide man 2026-08-04 10/500 2026-08-04 15:10 by loufangrui
信息提示
请填处理意见