应《网络安全法》要求，自2017年10月1日起，未进行实名认证将不得使用互联网跟帖服务。为保障您的帐号能够正常使用，请尽快对帐号进行手机号验证，感谢您的理解与支持！

24小时热门版块排行榜    

小木虫论坛-学术科研互动平台 » 计算模拟区 » 程序语言 » 其它 » 请教：用Shell, awk, perl等语言实现监视SGE集群节点和任务
182/2返回列表上一页12
查看: 1583  |  回复: 17
只看楼主 @他人 存档 新回复提醒 (忽略) 收藏    在APP中查看

wuy069

铁杆木虫 (正式写手)
引用回帖:
10楼: Originally posted by chembetsey at 2012-12-11 06:03:29
既然你感兴趣，我也没必要敝帚自珍了。

查看节点Qnod

qhost -j | \
awk ' BEGIN {
        print "------------------------------------------------------------------------------------------------&qu ...

qnod命令还是有问题：
如果执行主机关掉了，
qhost -j输出如下：
HOSTNAME                ARCH         NCPU  LOAD  MEMTOT  MEMUSE  SWAPTO  SWAPUS
-------------------------------------------------------------------------------
global                  -               -     -       -       -       -       -
cluster                 lx26-amd64      4     -    3.9G       -    4.0G       -

这时用qhost |grep ' -' |grep -v global来判断有没有执行主机的load为' -'，如果有这个执行主机的状态state为down。

当执行主机没有任务时，且LOAD不为' -'时，state显示也要为free。你写的这个qnod命令显示为空。

qnod基于qhost -j输出的能否加上个listflag，就是输出的Load，MemUse，SwapUse超出系统固有值时给加一个星号（*)，比如Load的值为4.87，这样超出4，多余0.5就加星（4.87*）。状态state的输出down,free,busy为加粗且为不同的颜色。

qjob基于qstat命令输出等候的任务能不能不要给出逝去时间，只是运行的任务才给出逝去时间；qjob的输出有点慢

能做到以上就perfect了。
赞一下 回复此楼
11楼2012-12-11 08:40:06
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

wuy069

铁杆木虫 (正式写手)
引用回帖:
10楼: Originally posted by chembetsey at 2012-12-11 06:03:29
既然你感兴趣，我也没必要敝帚自珍了。

查看节点Qnod

qhost -j | \
awk ' BEGIN {
        print "------------------------------------------------------------------------------------------------&qu ...

提交一个单独的4核任务，用qnod命令显示的task时输出是5，这个没弄好。
[wuy@cluster test]$ qstat
job-ID  prior   name       user         state submit/start at     queue                          slots ja-task-ID
-----------------------------------------------------------------------------------------------------------------
     36 0.55500 test5.sh   wuy          r     12/11/2012 08:21:52 [email]all.q@cluster.loca[/email]l                4

[wuy@cluster test]$ qnod
------------------------------------------------------------------------------------------------
Node                    Load    Ncpu   Mem   MemUse     Swap  SwapUse    State  Task  Job/User
------------------------------------------------------------------------------------------------
cluster                  2.36    4     3.9G     1.1G     4.0G      0.0    Busy    5    36/wuy
------------------------------------------------------------------------------------------------
赞一下 回复此楼
12楼2012-12-11 08:46:41
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

tracel

木虫 (正式写手)
★
jjdg: 金币+1, 赞同你的观点 2012-12-11 23:18:35
有问题就解决问题才是讨论的样子，总不能什么都让人帮你弄吧。
赞一下 回复此楼
13楼2012-12-11 10:23:57
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

wuy069

铁杆木虫 (正式写手)
引用回帖:
13楼: Originally posted by tracel at 2012-12-11 10:23:57
有问题就解决问题才是讨论的样子，总不能什么都让人帮你弄吧。

awk真的不咋会，就会个简单的cat test.e |awk '{print $1, $1}'
bash shell到时会不少，但是打印不出我想要的。
所以在这求助了；以后也会慢慢学awk
赞一下 回复此楼
14楼2012-12-11 10:44:12
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

tracel

木虫 (正式写手)
先看懂别人的脚本，稍微改下满足自己的要求，应该没什么难度吧
赞一下 回复此楼
15楼2012-12-11 10:48:20
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

wuy069

铁杆木虫 (正式写手)
引用回帖:
15楼: Originally posted by tracel at 2012-12-11 10:48:20
先看懂别人的脚本，稍微改下满足自己的要求，应该没什么难度吧

大哥，我真看不懂，至少现在来说，花一周的功夫应该可以；但如果有那时间，我也不会花这么多金币来求助了，金币倒不是问题；如果只是稍微修改下，就能满足，也不会提这要求了。当然，我也不会说懒到什么都要求助；自己学会了，会自己写才是根本；自己也会朝这个方向走的
赞一下 回复此楼
16楼2012-12-11 10:54:27
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

tracel

木虫 (正式写手)

【答案】应助回帖

awk '{print "\033[40;33m"$1"\033[0m",$2}'

显示颜色的可以这样搞。
赞一下 回复此楼
17楼2012-12-11 11:09:40
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖

wuy069

铁杆木虫 (正式写手)
引用回帖:
17楼: Originally posted by tracel at 2012-12-11 11:09:40
awk '{print "\033[40;33m"$1"\033[0m",$2}'

显示颜色的可以这样搞。

谢谢！从网上能看到一些：
颜色："\033[1;5;37;41mdown\033[0m"

flag:
# Flag nodes with status down, offline or unknown
        if (state[node] == "busy" || state[node] == "down" || state[node] == "offl" || state[node] == "UNKN" {
                stateflag="*"
                listnode++
        } else
                stateflag=" "

        # Flag unexpected CPU load average
        loaddiff = loadave[node] - numtasks[node]
        if (loaddiff > 0.5 || loaddiff < -0.5) {
                loadflag="*"
                listnode++
        } else
                loadflag=" "

        # Resident memory
        resi = (totmem[node]-availmem[node])/1024
        if (resi > 50 && resi > physmem[node]/1024 - 50) {      # High memory usage
                resiflag="*"
                listnode++
        } else
                resiflag=" "

        # Flag unexpected number of processes or users
        if (nsessions[node] > 2*ncpus[node] + 1) {      # More than 2 sessions per job
                sessflag="*"
                listnode++
        } else if (nusers[node] > ncpus[node]) {        # More users than nCPUs is bad
                sessflag="*"
                listnode++
        } else
                sessflag=" "

        # Flag unexpected number of jobs
        if (numjobs[node] > numtasks[node]) {           # Should be at least 1 task per job
                jobflag="*"
                listnode++
        } else
                jobflag=" "

组合在一起不会，抽时间看看教程；
谢谢！
赞一下 回复此楼
18楼2012-12-11 11:16:25
已阅   回复此楼   关注TA 给TA发消息 送TA红花 TA的回帖
相关版块跳转 我要订阅楼主 wuy069 的主题更新
182/2返回列表上一页12
普通表情 龙 兔 虎 猫
最具人气热帖推荐 [查看全部] 作者 回/看 最后发表
[公派出国] 售SCI-T0P文章，我:8O.5.5.1.O.54,科目齐全,可+急 +3 jzg3xk1po8 2026-07-31 6/300 2026-08-01 15:46 by y4XuShGyllvT
[考博] 售SCI-T0P文章，我:8O.5.5.1.O.54,科目齐全,可+急 +3 jzg3xk1po8 2026-07-31 11/550 2026-08-01 15:43 by y4XuShGyllvT
[基金申请] 售SCI一区文章，我:8.O.55.1.O.54,科目齐全,可伽急 +3 jzg3xk1po8 2026-07-31 11/550 2026-08-01 15:43 by y4XuShGyllvT
[基金申请] 小木虫看见有人已经知道结果了 +17 1234567wang 2026-07-25 22/1100 2026-08-01 15:43 by iaeyuan
[教师之家] 售SCI一区T0P文章，我:8.O55.1.O.54,科目全,可十急 +3 jzg3xk1po8 2026-07-31 8/400 2026-08-01 15:42 by y4XuShGyllvT
[考研] 售SCI一区T0P文章，我:8.O.55.1.O.5.4,科目全,可+急 +3 jzg3xk1po8 2026-07-31 11/550 2026-08-01 15:40 by y4XuShGyllvT
[基金申请] 面上再次挂了，太难了，躺也躺不了，倦也卷不过，小学校之殇！ +16 低垂的野花 2026-07-31 21/1050 2026-08-01 15:35 by jklily
[基金申请] 2026年国自然面上资助率 +15 布布和一二 2026-07-30 19/950 2026-08-01 15:18 by 40862026
[基金申请] 微信指数没变化，科研之友没阅读 +14 wangze12014 2026-07-28 18/900 2026-07-31 18:35 by lzchaihuo
[高分子] HXDI做水性聚氨酯乳液，是不是特别容易出渣 15+3 yuyusuv 2026-07-29 3/150 2026-07-31 09:21 by huizingga
[基金申请] 系统今天又提示维护了，估计离放榜不远了 +11 winnerche 2026-07-29 15/750 2026-07-30 23:08 by jnhyjjm
[考博] 申请2027年材料/化学类博士 10+3 考研老狗? 2026-07-25 5/250 2026-07-30 19:33 by 白色木鱼
[基金申请] 你们的时间戳变了吗 +3 archvillain 2026-07-30 4/200 2026-07-30 18:53 by levinzhwen
[基金申请] 今年的WR进展到哪一步了？ +5 wsgjhwz 2026-07-25 9/450 2026-07-30 12:59 by 可淡不可忘
[有机交流] 产物和副产物价值比较 30+4 小汤02 2026-07-27 5/250 2026-07-30 12:44 by czyzsu
[基金申请] 时间戳他又来了 +14 晓晓爱翠翠 2026-07-26 17/850 2026-07-29 16:30 by 呵呵二哥
[有机交流] 这个自发加氧反应的机理是什么？ 50+4 YUAN2273 2026-07-25 7/350 2026-07-29 12:27 by xiaobenpu
[基金申请] 这种情况还有戏吗 +5 drbart 2026-07-27 11/550 2026-07-29 05:50 by drbart
[基金申请] 同事接到电话了，我却没有 +4 1234567wang 2026-07-27 4/200 2026-07-28 10:11 by GOODLUCKER
[分析] 水蒸气蒸馏法乳化现象 +3 月光娇娇 2026-07-26 3/150 2026-07-26 23:25 by caiyun
信息提示
关闭
请填处理意见
关闭