24小时热门版块排行榜    

查看: 480  |  回复: 2

tengh

木虫 (小有名气)

[求助] 集群存储问题

大家好,我们实验室目前有16台4u的服务器,都是自己组装的(分批购买的),配置:cpu E5-2630,内存有32G和64G两种,通过infiniband交换机互联,自己在头结点(登录节点)上用3块2T硬盘组建了raid0作为公共存储,NFS共享给其它节点。
系统:centos6.3
任务管理系统:torque+maui

目前有个问题,在任务有大量数据读写时,头结点内存几乎耗尽,并且反应超慢,运行的nfsd进程有99个。load average将近达到100。

这个可能就是I/O瓶颈吧,不知道如何能够经济的提高整个系统磁盘的I/O性能?

忘各位给支个招,谢谢!

短期内不打算购买磁盘阵列组建lustre文件系统及添加专门的I/O节点。

[ Last edited by tengh on 2013-8-5 at 16:30 ]
回复此楼

» 猜你喜欢

» 本主题相关价值贴推荐,对您同样有帮助:

已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

yunfan951

铁杆木虫 (著名写手)

【答案】应助回帖


感谢参与,应助指数 +1
csgt0: 金币+1, 谢谢 2013-08-07 18:06:11
3块2T硬盘,这个貌似转速低,使用哪种接口?
另外最好把存储节点、RAID卡信息详细列一下
2楼2013-08-07 14:32:38
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

tengh

木虫 (小有名气)

引用回帖:
2楼: Originally posted by yunfan951 at 2013-08-07 14:32:38
3块2T硬盘,这个貌似转速低,使用哪种接口?
另外最好把存储节点、RAID卡信息详细列一下

谢谢!
硬盘是SATA 6G ST 7200转,没有用外插raid卡,用的是主板的,测试过节点间传输5百多兆。
不知如果换成sas的性能有多大提升,我看网上说sas的IOPS能提高一倍?
还有我看到SAS硬盘有7200转的,价格比sata的企业版的盘子贵不到一倍,不知道大家有没有用过的,效果怎样?
3楼2013-08-08 09:28:23
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 tengh 的主题更新
信息提示
请填处理意见