24小时热门版块排行榜    

查看: 559  |  回复: 2

tengh

木虫 (小有名气)

[求助] 集群存储问题

大家好,我们实验室目前有16台4u的服务器,都是自己组装的(分批购买的),配置:cpu E5-2630,内存有32G和64G两种,通过infiniband交换机互联,自己在头结点(登录节点)上用3块2T硬盘组建了raid0作为公共存储,NFS共享给其它节点。
系统:centos6.3
任务管理系统:torque+maui

目前有个问题,在任务有大量数据读写时,头结点内存几乎耗尽,并且反应超慢,运行的nfsd进程有99个。load average将近达到100。

这个可能就是I/O瓶颈吧,不知道如何能够经济的提高整个系统磁盘的I/O性能?

忘各位给支个招,谢谢!

短期内不打算购买磁盘阵列组建lustre文件系统及添加专门的I/O节点。

[ Last edited by tengh on 2013-8-5 at 16:30 ]
回复此楼

» 猜你喜欢

» 本主题相关价值贴推荐,对您同样有帮助:

已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

yunfan951

铁杆木虫 (著名写手)

【答案】应助回帖


感谢参与,应助指数 +1
csgt0: 金币+1, 谢谢 2013-08-07 18:06:11
3块2T硬盘,这个貌似转速低,使用哪种接口?
另外最好把存储节点、RAID卡信息详细列一下
2楼2013-08-07 14:32:38
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

tengh

木虫 (小有名气)

引用回帖:
2楼: Originally posted by yunfan951 at 2013-08-07 14:32:38
3块2T硬盘,这个貌似转速低,使用哪种接口?
另外最好把存储节点、RAID卡信息详细列一下

谢谢!
硬盘是SATA 6G ST 7200转,没有用外插raid卡,用的是主板的,测试过节点间传输5百多兆。
不知如果换成sas的性能有多大提升,我看网上说sas的IOPS能提高一倍?
还有我看到SAS硬盘有7200转的,价格比sata的企业版的盘子贵不到一倍,不知道大家有没有用过的,效果怎样?
3楼2013-08-08 09:28:23
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 tengh 的主题更新
最具人气热帖推荐 [查看全部] 作者 回/看 最后发表
[基金申请] 为什么网上很多人说本周 12号出结果 +4 瞬息宇宙 2026-08-10 4/200 2026-08-11 02:02 by 旁观2020
[基金申请] 基金中了 +15 laoda193707 2026-08-06 15/750 2026-08-11 00:11 by jiafei2190
[基金申请] 小木虫上这么多卖论文的,真有人买论文么?感觉没必要啊 +3 Tide man 2026-08-10 3/150 2026-08-10 21:48 by GZUZM
[基金申请] FileCode能看出啥? +7 要乐观耀哥 2026-08-10 15/750 2026-08-10 19:29 by 要乐观耀哥
[基金申请] 确定了,国自然21号放榜 +6 布布和一二 2026-08-10 7/350 2026-08-10 19:15 by 2000zf36392
[基金申请] 关于代码变化问题,想知道的进来 +17 且听虎啸 2026-08-07 24/1200 2026-08-10 18:35 by zhangduo2008
[基金申请] 静等基金结果 +5 gjjjzhong 2026-08-10 16/800 2026-08-10 17:19 by Tide man
[基金申请] 关于Filecode分析方法 +3 majunge000 2026-08-10 3/150 2026-08-10 15:46 by lch2012
[基金申请] 8月时间戳变的,举个手。玩一下,释放压力 +11 archvillain 2026-08-04 13/650 2026-08-10 14:41 by seekfind
[基金申请] 好奇怪的filecode +4 布布和一二 2026-08-08 5/250 2026-08-10 14:20 by 冰心玉壶晴
[基金申请] 2026国自然放榜时间 +9 布布和一二 2026-08-08 9/450 2026-08-10 11:22 by xxxx2020
[基金申请] 面上项目filecode邪修 +5 西山十月 2026-08-09 7/350 2026-08-10 07:32 by 仁砚薪传
[基金申请] 关于豆爷回答的JTJC与%2F数量 +5 yang182083 2026-08-06 7/350 2026-08-08 18:29 by zhanghaozhu
[基金申请] 国基金的申报应该改成非等额制,评价高的钱多评价低的钱少,但是增加资助率 +7 a089 2026-08-07 7/350 2026-08-08 18:05 by gltch
[基金申请] 关于filecode +4 布布和一二 2026-08-07 7/350 2026-08-07 22:55 by zhanghaozhu
[基金申请] 化学口download_prp&fileCode的固定段好像这几天一直没变,有变的大神么? +3 Tide man 2026-08-07 4/200 2026-08-07 22:39 by Tide man
[基金申请] filecode变化情况 +6 布布和一二 2026-08-07 22/1100 2026-08-07 14:45 by 且听虎啸
[基金申请] 大家散了吧,后缀研究没有意义,别浪费时间了,过好目前的每一天,不要焦虑 +5 Tide man 2026-08-06 7/350 2026-08-07 13:11 by 医学老男孩
[基金申请] filecode +8 布布和一二 2026-08-06 11/550 2026-08-06 20:41 by tangpu318
[基金申请] 纯娱乐,不喜欢勿喷 +7 Tide man 2026-08-04 10/500 2026-08-04 15:10 by loufangrui
信息提示
请填处理意见