24小时热门版块排行榜    

查看: 3580  |  回复: 6
【悬赏金币】回答本帖问题,作者sbkk将赠送您 100 个金币

sbkk

铁杆木虫 (著名写手)

[求助] torque-6.1.2 安装问题,子节点down状态如何启动已有2人参与

torque-6.1.2 安装问题,节点down状态如何启动

qterm -t quick
pbs_server
pbsnodes -a

发现子节点是 state = down
已关防火墙,配置正确,可ssh切换,节点服务都启动,还是出问题

主节点:

[root@calserver calserver]# for i in pbs_server pbs_sched pbs_mom trqauthd; do service $i start; done
Starting pbs_server (via systemctl):                       [  OK  ]
Starting pbs_sched (via systemctl):                        [  OK  ]
Starting pbs_mom (via systemctl):                          [  OK  ]
Starting trqauthd (via systemctl):                         [  OK  ]

[root@calserver calserver]#  ps -ef | grep pbs
root       1160      1  0 01:18 ?        00:00:00 /usr/local/torque/sbin/pbs_server -F -d /var/spool/torque
root       3566      1  0 01:20 ?        00:00:00 /usr/local/torque/sbin/pbs_sched -d /var/spool/torque
root       3593      1  0 01:20 ?        00:00:00 /usr/local/torque/sbin/pbs_mom -F -d /var/spool/torque
root       3659   3428  0 01:21 pts/0    00:00:00 grep --color=auto pbs

[root@calserver calserver]# qnodes
calserver
     state = free
     power_state = Running
     np = 16
     ntype = cluster
     status = opsys=linux,uname=Linux calserver 3.10.0-862.14.4.el7.x86_64 #1 SMP Wed Sep 26 15:12:11 UTC 2018 x86_64,sessions=1593 2113 2237 2247 2501 3135 3185 3240,nsessions=8,nusers=2,idletime=256,totmem=5960692kb,availmem=4875732kb,physmem=3863544kb,ncpus=16,loadave=0.18,gres=,netload=89393,state=free,varattr= ,cpuclock=Fixed,macaddr=00:0c:29:a0:9b:d2,version=6.1.2,rectime=1540660913,jobs=
     mom_service_port = 15002
     mom_manager_port = 15003

calnode02
     state = down
     power_state = Running
     np = 4
     ntype = cluster
     mom_service_port = 15002
     mom_manager_port = 15003

calnode03
     state = down
     power_state = Running
     np = 12
     ntype = cluster
     mom_service_port = 15002
     mom_manager_port = 15003


计算节点:

[root@calnode02 ~]# systemctl status pbs_mom.service -l
● pbs_mom.service - TORQUE pbs_mom daemon
   Loaded: loaded (/usr/lib/systemd/system/pbs_mom.service; enabled; vendor preset: disabled)
   Active: active (running) since Sun 2018-10-28 01:18:50 CST; 10min ago
Main PID: 1041 (pbs_mom)
    Tasks: 11
   Memory: 101.8M
   CGroup: /system.slice/pbs_mom.service
           └─1041 /usr/local/torque/sbin/pbs_mom -F -d /var/spool/torque

Oct 28 01:29:05 calnode02 pbs_mom[1041]: LOG_ERROR::send_update_to_a_server, Could not contact any of the servers to send an update
Oct 28 01:29:05 calnode02 pbs_mom[1041]: LOG_ERROR::send_update_to_a_server, Status not successfully updated for 154 MOM status update intervals
Oct 28 01:29:09 calnode02 pbs_mom[1041]: LOG_ERROR::send_update_to_a_server, Could not contact any of the servers to send an update
Oct 28 01:29:09 calnode02 pbs_mom[1041]: LOG_ERROR::send_update_to_a_server, Status not successfully updated for 155 MOM status update intervals
Oct 28 01:29:14 calnode02 pbs_mom[1041]: LOG_ERROR::send_update_to_a_server, Could not contact any of the servers to send an update
Oct 28 01:29:14 calnode02 pbs_mom[1041]: LOG_ERROR::send_update_to_a_server, Status not successfully updated for 156 MOM status update intervals
Oct 28 01:29:18 calnode02 pbs_mom[1041]: LOG_ERROR::send_update_to_a_server, Could not contact any of the servers to send an update
Oct 28 01:29:18 calnode02 pbs_mom[1041]: LOG_ERROR::send_update_to_a_server, Status not successfully updated for 157 MOM status update intervals
Oct 28 01:29:22 calnode02 pbs_mom[1041]: LOG_ERROR::send_update_to_a_server, Could not contact any of the servers to send an update
Oct 28 01:29:22 calnode02 pbs_mom[1041]: LOG_ERROR::send_update_to_a_server, Status not successfully updated for 158 MOM status update intervals


参考安装方法
MS7、Torque在CentOS6.5上的安装-即MS计算集群搭建(原创) - 第一性原理 - MS - 小木虫论坛-学术科研互动平台  http://muchong.com/t-9836836-1-authorid-1192095
Centos7安装-多节点Torque - u012460749的博客 - CSDN博客  https://blog.csdn.net/u012460749/article/details/78583026


上面小木虫的安装方法里面
nfs分享ms 的目录为什么提示找不到

将 Accelrys 目录共享给其他计算节点:
# echo ‘/home/xxx/Accelrys *(rw,no_root_squash)’ >> /etc/exports
重启 nfs 服务:
$ sudo service nfs restart (centos7 : systemctl restart nfs.service)
b)  计算节点配置
创建共享文件夹 Accelrys,并挂载服务节点共享的 Accelrys:
$ cd
$ mkdir Accelrys
$ sudo mount –t nfs calserver:/home/xxx/Accelrys/ /home/xxx/Accelrys/
这一步找不到地址


配置开机自动挂载 Accelrys:
# echo ‘mount –t nfs calserver:/home/xxx/Accelrys/ /home/xxx/Accelrys/’ >> /etc/rc.d/rc.local
回复此楼
路能走多远,在于事先准备的有多好。不要看到希望而坚持,只有坚持才会看到希望。
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

sbkk

铁杆木虫 (著名写手)

主节点上pbs_server的log

[root@calserver calserver]# systemctl status pbs_server.service -l
● pbs_server.service - TORQUE pbs_server daemon
   Loaded: loaded (/usr/lib/systemd/system/pbs_server.service; enabled; vendor preset: disabled)
   Active: active (running) since Sun 2018-10-28 01:18:08 CST; 35min ago
Main PID: 1160 (pbs_server)
    Tasks: 12
   Memory: 1.6M
   CGroup: /system.slice/pbs_server.service
           └─1160 /usr/local/torque/sbin/pbs_server -F -d /var/spool/torque

Oct 28 01:18:08 calserver systemd[1]: Starting TORQUE pbs_server daemon...
Oct 28 01:18:08 calserver PBS_Server[1160]: LOG_ERROR::tcp_connect_sockaddr, Failed when trying to open tcp connection - connect() failed [rc = -2] [addr = 127.0.0.1:15003]
Oct 28 01:18:08 calserver PBS_Server[1160]: LOG_ERROR::sendHierarchyToNode, Could not send mom hierarchy to host calserver:15003
Oct 28 01:18:08 calserver PBS_Server[1160]: LOG_ERROR::tcp_connect_sockaddr, Failed when trying to open tcp connection - connect() failed [rc = 15096] [addr = 192.168.10.102:15003]
Oct 28 01:18:08 calserver PBS_Server[1160]: LOG_ERROR::sendHierarchyToNode, Could not send mom hierarchy to host calnode02:15003
Oct 28 01:18:08 calserver PBS_Server[1160]: LOG_ERROR::tcp_connect_sockaddr, Failed when trying to open tcp connection - connect() failed [rc = 15096] [addr = 192.168.10.103:15003]
Oct 28 01:18:08 calserver PBS_Server[1160]: LOG_ERROR::sendHierarchyToNode, Could not send mom hierarchy to host calnode03:15003
Oct 28 01:28:09 calserver pbs_server[1160]: Assertion failed, bad pointer in link: file "req_select.c", line 401
Oct 28 01:38:09 calserver pbs_server[1160]: Assertion failed, bad pointer in link: file "req_select.c", line 401
Oct 28 01:48:09 calserver pbs_server[1160]: Assertion failed, bad pointer in link: file "req_select.c", line 401
路能走多远,在于事先准备的有多好。不要看到希望而坚持,只有坚持才会看到希望。
2楼2018-10-28 01:57:55
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

cj622

木虫 (正式写手)

【答案】应助回帖

感谢参与,应助指数 +1
意思是共享calserver节点的ms目录那一步没完成?那肯定是不行的,问题就处在这里了!为什么会找不到地址?检查下地址有没有写错呀,那个地址就是就是ms的安装地址,写对了应该能找到的呀

» 本帖已获得的红花(最新10朵)

呜哈哈
3楼2018-10-30 09:40:53
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

sbkk

铁杆木虫 (著名写手)

送红花一朵
引用回帖:
3楼: Originally posted by cj622 at 2018-10-30 09:40:53
意思是共享calserver节点的ms目录那一步没完成?那肯定是不行的,问题就处在这里了!为什么会找不到地址?检查下地址有没有写错呀,那个地址就是就是ms的安装地址,写对了应该能找到的呀

对呀不知道为什么节点打不开

发自小木虫Android客户端
路能走多远,在于事先准备的有多好。不要看到希望而坚持,只有坚持才会看到希望。
4楼2018-10-30 13:03:06
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

sbkk

铁杆木虫 (著名写手)

送红花一朵
引用回帖:
3楼: Originally posted by cj622 at 2018-10-30 09:40:53
意思是共享calserver节点的ms目录那一步没完成?那肯定是不行的,问题就处在这里了!为什么会找不到地址?检查下地址有没有写错呀,那个地址就是就是ms的安装地址,写对了应该能找到的呀

不是  ms布置都没问题,是torque服务节点和计算节点安装完成后状态是down,不是free
ms里面torque设置没问题,torque调用不了计算节点
路能走多远,在于事先准备的有多好。不要看到希望而坚持,只有坚持才会看到希望。
5楼2018-10-30 18:20:59
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

Ice_TeaZ

铁虫 (初入文坛)

楼主解决了么,我的是 4.2.10的torque,就直接一个节点挂了所有的核,然后state一直是down,重启,关防火墙,qterm一系列的都试过了怎么都开不了,系统是centos7
6楼2018-11-03 09:29:48
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

一川烟草

铁杆木虫 (正式写手)

【答案】应助回帖

引用回帖:
6楼: Originally posted by Ice_TeaZ at 2018-11-03 09:29:48
楼主解决了么,我的是 4.2.10的torque,就直接一个节点挂了所有的核,然后state一直是down,重启,关防火墙,qterm一系列的都试过了怎么都开不了,系统是centos7

提供几个思路:

1、防火墙不能关闭,需要彻底卸载;

2、所有服务节点、计算节点节点间配置无密互访;

3、路由器中绑定死所有节点的MAC和ip地址,并在hosts文件中写死;

4、服务节点的几个配置文件写死;

5、计算节点的几个配置文件写死;

6、qmgr建立恰当的默认计算队列。

检查以上几点,一般不会出问题。经验之谈。
7楼2018-11-04 18:38:18
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 sbkk 的主题更新
不应助 确定回帖应助 (注意:应助才可能被奖励,但不允许灌水,必须填写15个字符以上)
最具人气热帖推荐 [查看全部] 作者 回/看 最后发表
[基金申请] 有人看了我的科研之友 +3 jurkat.1640 2024-05-14 5/250 2024-05-14 19:53 by weian123456
[教师之家] 宋凯 +3 yexuqing 2024-05-14 3/150 2024-05-14 19:51 by cstiger555
[教师之家] 相比过去,现在高校导师水平越来越高(可见招聘条件),研究生越来越差 +12 苏东坡二世 2024-05-11 16/800 2024-05-14 19:27 by 毛meiqi
[教师之家] 学生家长私下联系老师修改成绩不成,唆使19名学生联名要求复核成绩 +21 sjtu2012 2024-05-11 23/1150 2024-05-14 18:58 by wanghuawei
[基金申请] 这个教授的科研做得真好 +3 zju2000 2024-05-14 4/200 2024-05-14 18:10 by lwliwei1989
[考博] 寻找高分子领域博导 +4 小政雅图 2024-05-14 4/200 2024-05-14 17:07 by shengwenbo
[硕博家园] 29 岁去读一个双非学校机械工程的博士 还有前途吗 +15 funaizheng 2024-05-09 18/900 2024-05-14 16:05 by 安塔瓦拉多
[基金申请] 面上项目代表作必须有通讯作者文章吗? +24 zlxnnx111 2024-05-09 39/1950 2024-05-14 15:03 by zlxnnx111
[基金申请] 12个本子最多让给1a2b +12 地球e村长 2024-05-13 15/750 2024-05-14 13:10 by blueearth171
[基金申请] 信息口青基送审了吗 +7 WeichaoDing 2024-05-08 10/500 2024-05-14 10:03 by 昂首走
[基金申请] 再谈一作和二作 +19 jklily 2024-05-10 33/1650 2024-05-13 17:12 by mierbushiwo
[基金申请] 祈福第三次青基 +17 lylylyheart 2024-05-09 26/1300 2024-05-13 15:57 by lylylyheart
[找工作] 985博士毕业,前几天通过了河南省科学院下面一个所的面试,值得去吗? +13 wendao_2016 2024-05-07 20/1000 2024-05-13 15:42 by 3001160025
[考博] 24/25申博,科研助理找导师 +9 cc毕业了吗 2024-05-12 9/450 2024-05-13 14:31 by zxl_1105
[教师之家] 请问有没有想要联合培养学生的老师? +5 吴小懒 2024-05-08 6/300 2024-05-13 09:22 by Xiaolin81
[基金申请] 科研之友老是给我发消息 +6 问君611 2024-05-11 8/400 2024-05-12 17:24 by 淀粉搬运工
[药学] 本科药学,未来怎么选择 17+4 Roywjq777 2024-05-07 8/400 2024-05-12 17:01 by zhangcaiye
[有机交流] 常见的固体有机酸由哪些呢? 40+4 whw818 2024-05-09 8/400 2024-05-11 18:45 by mapenggao
[基金申请] 是这样的? +17 xiangsu121 2024-05-10 19/950 2024-05-11 11:43 by zqwcr
[硕博家园] 化斋 求解惑 +5 tyl1111111 2024-05-08 7/350 2024-05-11 08:27 by chemhua
信息提示
请填处理意见