24小时热门版块排行榜    

查看: 555  |  回复: 2

tengh

木虫 (小有名气)

[求助] 集群存储问题

大家好,我们实验室目前有16台4u的服务器,都是自己组装的(分批购买的),配置:cpu E5-2630,内存有32G和64G两种,通过infiniband交换机互联,自己在头结点(登录节点)上用3块2T硬盘组建了raid0作为公共存储,NFS共享给其它节点。
系统:centos6.3
任务管理系统:torque+maui

目前有个问题,在任务有大量数据读写时,头结点内存几乎耗尽,并且反应超慢,运行的nfsd进程有99个。load average将近达到100。

这个可能就是I/O瓶颈吧,不知道如何能够经济的提高整个系统磁盘的I/O性能?

忘各位给支个招,谢谢!

短期内不打算购买磁盘阵列组建lustre文件系统及添加专门的I/O节点。

[ Last edited by tengh on 2013-8-5 at 16:30 ]
回复此楼

» 猜你喜欢

» 本主题相关价值贴推荐,对您同样有帮助:

已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

yunfan951

铁杆木虫 (著名写手)

【答案】应助回帖


感谢参与,应助指数 +1
csgt0: 金币+1, 谢谢 2013-08-07 18:06:11
3块2T硬盘,这个貌似转速低,使用哪种接口?
另外最好把存储节点、RAID卡信息详细列一下
2楼2013-08-07 14:32:38
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

tengh

木虫 (小有名气)

引用回帖:
2楼: Originally posted by yunfan951 at 2013-08-07 14:32:38
3块2T硬盘,这个貌似转速低,使用哪种接口?
另外最好把存储节点、RAID卡信息详细列一下

谢谢!
硬盘是SATA 6G ST 7200转,没有用外插raid卡,用的是主板的,测试过节点间传输5百多兆。
不知如果换成sas的性能有多大提升,我看网上说sas的IOPS能提高一倍?
还有我看到SAS硬盘有7200转的,价格比sata的企业版的盘子贵不到一倍,不知道大家有没有用过的,效果怎样?
3楼2013-08-08 09:28:23
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 tengh 的主题更新
最具人气热帖推荐 [查看全部] 作者 回/看 最后发表
[基金申请] 综述论文作为代表作会不会影响评审专家的印象分? +10 yufeiwaner 2026-08-09 11/550 2026-08-10 18:47 by yufeiwaner
[基金申请] 关于代码变化问题,想知道的进来 +17 且听虎啸 2026-08-07 24/1200 2026-08-10 18:35 by zhangduo2008
[基金申请] 静等基金结果 +5 gjjjzhong 2026-08-10 16/800 2026-08-10 17:19 by Tide man
[基金申请] 关于Filecode分析方法 +3 majunge000 2026-08-10 3/150 2026-08-10 15:46 by lch2012
[基金申请] 国自然结果 +4 Vierhys 2026-08-10 8/400 2026-08-10 15:06 by Vierhys
[基金申请] 应该是93bebmhtak前后十一个字符比较关键 +14 Lanmanbaby 2026-08-09 22/1100 2026-08-10 14:57 by wwncly
[基金申请] 8月时间戳变的,举个手。玩一下,释放压力 +11 archvillain 2026-08-04 13/650 2026-08-10 14:41 by seekfind
[基金申请] 这样的filecode谁见过 +11 布布和一二 2026-08-08 22/1100 2026-08-10 11:10 by wmfsnow
[基金申请] 国基金的申报应该改成非等额制,评价高的钱多评价低的钱少,但是增加资助率 +7 a089 2026-08-07 7/350 2026-08-08 18:05 by gltch
[基金申请] 基金中了 +14 laoda193707 2026-08-06 14/700 2026-08-08 00:23 by 实验小白ha
[基金申请] 关于filecode +4 布布和一二 2026-08-07 7/350 2026-08-07 22:55 by zhanghaozhu
[基金申请] 娱乐 +6 Tide man 2026-08-03 6/300 2026-08-07 22:40 by 铁帽子农民
[基金申请] 化学口download_prp&fileCode的固定段好像这几天一直没变,有变的大神么? +3 Tide man 2026-08-07 4/200 2026-08-07 22:39 by Tide man
[基金申请] filecode变化情况 +6 布布和一二 2026-08-07 22/1100 2026-08-07 14:45 by 且听虎啸
[基金申请] filecode +14 等待解的谜 2026-08-06 19/950 2026-08-07 12:20 by wlwhappy
[基金申请] filecode +8 布布和一二 2026-08-06 11/550 2026-08-06 20:41 by tangpu318
[基金申请] 求各位大神看下 100+6 hpkpkpkp 2026-08-05 33/1650 2026-08-06 14:49 by zhiyanjiang
[基金申请] 影响面上的因素 +8 布布和一二 2026-08-05 11/550 2026-08-06 10:41 by 宝贝虫子
[基金申请] 好消息?这个有何含义??? +8 Tide man 2026-08-05 10/500 2026-08-05 16:14 by xmuxiaoyu
[基金申请] 有没有H口的?有收到消息的吗? +3 超级海虾 2026-08-04 3/150 2026-08-04 17:26 by 学教育滴
信息提示
请填处理意见