查看: 3556  |  回复: 6
【悬赏金币】回答本帖问题,作者sbkk将赠送您 100 个金币

sbkk

铁杆木虫 (著名写手)

[求助] torque-6.1.2 安装问题,子节点down状态如何启动已有2人参与

torque-6.1.2 安装问题,节点down状态如何启动

qterm -t quick
pbs_server
pbsnodes -a

发现子节点是 state = down
已关防火墙,配置正确,可ssh切换,节点服务都启动,还是出问题

主节点:

[root@calserver calserver]# for i in pbs_server pbs_sched pbs_mom trqauthd; do service $i start; done
Starting pbs_server (via systemctl):                       [  OK  ]
Starting pbs_sched (via systemctl):                        [  OK  ]
Starting pbs_mom (via systemctl):                          [  OK  ]
Starting trqauthd (via systemctl):                         [  OK  ]

[root@calserver calserver]#  ps -ef | grep pbs
root       1160      1  0 01:18 ?        00:00:00 /usr/local/torque/sbin/pbs_server -F -d /var/spool/torque
root       3566      1  0 01:20 ?        00:00:00 /usr/local/torque/sbin/pbs_sched -d /var/spool/torque
root       3593      1  0 01:20 ?        00:00:00 /usr/local/torque/sbin/pbs_mom -F -d /var/spool/torque
root       3659   3428  0 01:21 pts/0    00:00:00 grep --color=auto pbs

[root@calserver calserver]# qnodes
calserver
     state = free
     power_state = Running
     np = 16
     ntype = cluster
     status = opsys=linux,uname=Linux calserver 3.10.0-862.14.4.el7.x86_64 #1 SMP Wed Sep 26 15:12:11 UTC 2018 x86_64,sessions=1593 2113 2237 2247 2501 3135 3185 3240,nsessions=8,nusers=2,idletime=256,totmem=5960692kb,availmem=4875732kb,physmem=3863544kb,ncpus=16,loadave=0.18,gres=,netload=89393,state=free,varattr= ,cpuclock=Fixed,macaddr=00:0c:29:a0:9b:d2,version=6.1.2,rectime=1540660913,jobs=
     mom_service_port = 15002
     mom_manager_port = 15003

calnode02
     state = down
     power_state = Running
     np = 4
     ntype = cluster
     mom_service_port = 15002
     mom_manager_port = 15003

calnode03
     state = down
     power_state = Running
     np = 12
     ntype = cluster
     mom_service_port = 15002
     mom_manager_port = 15003


计算节点:

[root@calnode02 ~]# systemctl status pbs_mom.service -l
● pbs_mom.service - TORQUE pbs_mom daemon
   Loaded: loaded (/usr/lib/systemd/system/pbs_mom.service; enabled; vendor preset: disabled)
   Active: active (running) since Sun 2018-10-28 01:18:50 CST; 10min ago
Main PID: 1041 (pbs_mom)
    Tasks: 11
   Memory: 101.8M
   CGroup: /system.slice/pbs_mom.service
           └─1041 /usr/local/torque/sbin/pbs_mom -F -d /var/spool/torque

Oct 28 01:29:05 calnode02 pbs_mom[1041]: LOG_ERROR::send_update_to_a_server, Could not contact any of the servers to send an update
Oct 28 01:29:05 calnode02 pbs_mom[1041]: LOG_ERROR::send_update_to_a_server, Status not successfully updated for 154 MOM status update intervals
Oct 28 01:29:09 calnode02 pbs_mom[1041]: LOG_ERROR::send_update_to_a_server, Could not contact any of the servers to send an update
Oct 28 01:29:09 calnode02 pbs_mom[1041]: LOG_ERROR::send_update_to_a_server, Status not successfully updated for 155 MOM status update intervals
Oct 28 01:29:14 calnode02 pbs_mom[1041]: LOG_ERROR::send_update_to_a_server, Could not contact any of the servers to send an update
Oct 28 01:29:14 calnode02 pbs_mom[1041]: LOG_ERROR::send_update_to_a_server, Status not successfully updated for 156 MOM status update intervals
Oct 28 01:29:18 calnode02 pbs_mom[1041]: LOG_ERROR::send_update_to_a_server, Could not contact any of the servers to send an update
Oct 28 01:29:18 calnode02 pbs_mom[1041]: LOG_ERROR::send_update_to_a_server, Status not successfully updated for 157 MOM status update intervals
Oct 28 01:29:22 calnode02 pbs_mom[1041]: LOG_ERROR::send_update_to_a_server, Could not contact any of the servers to send an update
Oct 28 01:29:22 calnode02 pbs_mom[1041]: LOG_ERROR::send_update_to_a_server, Status not successfully updated for 158 MOM status update intervals


参考安装方法
MS7、Torque在CentOS6.5上的安装-即MS计算集群搭建(原创) - 第一性原理 - MS - 小木虫论坛-学术科研互动平台  http://muchong.com/t-9836836-1-authorid-1192095
Centos7安装-多节点Torque - u012460749的博客 - CSDN博客  https://blog.csdn.net/u012460749/article/details/78583026


上面小木虫的安装方法里面
nfs分享ms 的目录为什么提示找不到

将 Accelrys 目录共享给其他计算节点:
# echo ‘/home/xxx/Accelrys *(rw,no_root_squash)’ >> /etc/exports
重启 nfs 服务:
$ sudo service nfs restart (centos7 : systemctl restart nfs.service)
b)  计算节点配置
创建共享文件夹 Accelrys,并挂载服务节点共享的 Accelrys:
$ cd
$ mkdir Accelrys
$ sudo mount –t nfs calserver:/home/xxx/Accelrys/ /home/xxx/Accelrys/
这一步找不到地址


配置开机自动挂载 Accelrys:
# echo ‘mount –t nfs calserver:/home/xxx/Accelrys/ /home/xxx/Accelrys/’ >> /etc/rc.d/rc.local
回复此楼
路能走多远,在于事先准备的有多好。不要看到希望而坚持,只有坚持才会看到希望。
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

sbkk

铁杆木虫 (著名写手)

主节点上pbs_server的log

[root@calserver calserver]# systemctl status pbs_server.service -l
● pbs_server.service - TORQUE pbs_server daemon
   Loaded: loaded (/usr/lib/systemd/system/pbs_server.service; enabled; vendor preset: disabled)
   Active: active (running) since Sun 2018-10-28 01:18:08 CST; 35min ago
Main PID: 1160 (pbs_server)
    Tasks: 12
   Memory: 1.6M
   CGroup: /system.slice/pbs_server.service
           └─1160 /usr/local/torque/sbin/pbs_server -F -d /var/spool/torque

Oct 28 01:18:08 calserver systemd[1]: Starting TORQUE pbs_server daemon...
Oct 28 01:18:08 calserver PBS_Server[1160]: LOG_ERROR::tcp_connect_sockaddr, Failed when trying to open tcp connection - connect() failed [rc = -2] [addr = 127.0.0.1:15003]
Oct 28 01:18:08 calserver PBS_Server[1160]: LOG_ERROR::sendHierarchyToNode, Could not send mom hierarchy to host calserver:15003
Oct 28 01:18:08 calserver PBS_Server[1160]: LOG_ERROR::tcp_connect_sockaddr, Failed when trying to open tcp connection - connect() failed [rc = 15096] [addr = 192.168.10.102:15003]
Oct 28 01:18:08 calserver PBS_Server[1160]: LOG_ERROR::sendHierarchyToNode, Could not send mom hierarchy to host calnode02:15003
Oct 28 01:18:08 calserver PBS_Server[1160]: LOG_ERROR::tcp_connect_sockaddr, Failed when trying to open tcp connection - connect() failed [rc = 15096] [addr = 192.168.10.103:15003]
Oct 28 01:18:08 calserver PBS_Server[1160]: LOG_ERROR::sendHierarchyToNode, Could not send mom hierarchy to host calnode03:15003
Oct 28 01:28:09 calserver pbs_server[1160]: Assertion failed, bad pointer in link: file "req_select.c", line 401
Oct 28 01:38:09 calserver pbs_server[1160]: Assertion failed, bad pointer in link: file "req_select.c", line 401
Oct 28 01:48:09 calserver pbs_server[1160]: Assertion failed, bad pointer in link: file "req_select.c", line 401
路能走多远,在于事先准备的有多好。不要看到希望而坚持,只有坚持才会看到希望。
2楼2018-10-28 01:57:55
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

cj622

木虫 (正式写手)

【答案】应助回帖

感谢参与,应助指数 +1
意思是共享calserver节点的ms目录那一步没完成?那肯定是不行的,问题就处在这里了!为什么会找不到地址?检查下地址有没有写错呀,那个地址就是就是ms的安装地址,写对了应该能找到的呀

» 本帖已获得的红花(最新10朵)

呜哈哈
3楼2018-10-30 09:40:53
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

sbkk

铁杆木虫 (著名写手)

送红花一朵
引用回帖:
3楼: Originally posted by cj622 at 2018-10-30 09:40:53
意思是共享calserver节点的ms目录那一步没完成?那肯定是不行的,问题就处在这里了!为什么会找不到地址?检查下地址有没有写错呀,那个地址就是就是ms的安装地址,写对了应该能找到的呀

对呀不知道为什么节点打不开

发自小木虫Android客户端
路能走多远,在于事先准备的有多好。不要看到希望而坚持,只有坚持才会看到希望。
4楼2018-10-30 13:03:06
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

sbkk

铁杆木虫 (著名写手)

送红花一朵
引用回帖:
3楼: Originally posted by cj622 at 2018-10-30 09:40:53
意思是共享calserver节点的ms目录那一步没完成?那肯定是不行的,问题就处在这里了!为什么会找不到地址?检查下地址有没有写错呀,那个地址就是就是ms的安装地址,写对了应该能找到的呀

不是  ms布置都没问题,是torque服务节点和计算节点安装完成后状态是down,不是free
ms里面torque设置没问题,torque调用不了计算节点
路能走多远,在于事先准备的有多好。不要看到希望而坚持,只有坚持才会看到希望。
5楼2018-10-30 18:20:59
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

Ice_TeaZ

铁虫 (初入文坛)

楼主解决了么,我的是 4.2.10的torque,就直接一个节点挂了所有的核,然后state一直是down,重启,关防火墙,qterm一系列的都试过了怎么都开不了,系统是centos7
6楼2018-11-03 09:29:48
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

一川烟草

铁杆木虫 (正式写手)

【答案】应助回帖

引用回帖:
6楼: Originally posted by Ice_TeaZ at 2018-11-03 09:29:48
楼主解决了么,我的是 4.2.10的torque,就直接一个节点挂了所有的核,然后state一直是down,重启,关防火墙,qterm一系列的都试过了怎么都开不了,系统是centos7

提供几个思路:

1、防火墙不能关闭,需要彻底卸载;

2、所有服务节点、计算节点节点间配置无密互访;

3、路由器中绑定死所有节点的MAC和ip地址,并在hosts文件中写死;

4、服务节点的几个配置文件写死;

5、计算节点的几个配置文件写死;

6、qmgr建立恰当的默认计算队列。

检查以上几点,一般不会出问题。经验之谈。
7楼2018-11-04 18:38:18
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 sbkk 的主题更新
不应助 确定回帖应助 (注意:应助才可能被奖励,但不允许灌水,必须填写15个字符以上)
最具人气热帖推荐 [查看全部] 作者 回/看 最后发表
[硕博家园] 博士后和科研助理好难找啊 +6 找工作啊 2024-04-28 6/300 2024-04-29 00:46 by mayuan1919
[基金申请] 中国科学信息研究所国际学术期刊预警名单 +6 zju2000 2024-04-28 6/300 2024-04-29 00:20 by budofchina
[论文投稿] LWT投 +4 AChen92 2024-04-26 4/200 2024-04-28 22:26 by hapyia2100
[考博] 博士招生-211农业院校 +6 NYC917 2024-04-26 12/600 2024-04-28 21:51 by NYC917
[论文投稿] 求论文投稿期刊推荐 15+3 mihudawang 2024-04-26 7/350 2024-04-28 20:20 by J584326
[考博] 真的好想读博! +17 wangzhe_bs 2024-04-22 25/1250 2024-04-28 17:10 by wangzhe_bs
[找工作] 江苏理工学院要慎选 +5 jjchenshui 2024-04-27 6/300 2024-04-28 16:51 by jjchenshui
[硕博家园] 失之东隅 收之桑榆 +8 半世迷离 2024-04-27 16/800 2024-04-28 16:43 by 半世迷离
[考博] 25年博士申请 +8 Changzixuan 2024-04-25 14/700 2024-04-28 16:10 by Napoleonsky
[有机交流] 以2氟甲苯为原料做2氟4溴甲苯 +3 高树桩 2024-04-24 7/350 2024-04-28 14:37 by 高树桩
[基金申请] 基金开始函评了吗? +18 wych1103 2024-04-25 18/900 2024-04-28 13:18 by peterlizb
[教师之家] 大学直属学院卸任的副院长退休后还享受副处级的养老待遇吗? +6 苏东坡二世 2024-04-27 6/300 2024-04-28 08:35 by ou0551
[论文投稿] AC审稿 +3 马winner 2024-04-26 7/350 2024-04-27 23:33 by topedit
[硕博家园] 聊天 +13 暮色恋伊人 2024-04-22 14/700 2024-04-27 23:26 by @tanzelin
[考研] 没学上 +7 季向阳 2024-04-26 13/650 2024-04-27 20:38 by 一条咸鱼.
[论文投稿] Nature一直在编辑手里,考虑好几天了,是悬了吗 +13 彩虹初见 2024-04-24 13/650 2024-04-27 15:24 by cuan118
[基金申请] "颜宁:基础研究应顶天立地"能做到基础研究同时顶天立地的才是牛人 +6 zju2000 2024-04-24 6/300 2024-04-27 10:17 by kcmn1000
[论文投稿] 投稿RSC旗下杂志突然间看不到投稿状态,里面投稿的文章信息不见了,有遇到过的吗? 50+3 dlying 2024-04-26 3/150 2024-04-27 09:58 by bobvan
[电化学] 耗材发问 +4 Happy C 2024-04-22 4/200 2024-04-25 11:03 by 普通小虫
[考博] 24年 申博 化学/材料 一作6篇sci +9 wangyp123 2024-04-23 11/550 2024-04-24 19:01 by bangbangbiu
信息提示
请填处理意见