实例介绍
【实例简介】
torque很好用的一款作业管理软件，但是torque的作业调度器过于简单，因此，搭配maui，效果很好。
4.3默认队列设置 fqmgr: create queue dque queue type=execution #qmgr: set server default queue=dque #qmgr: set queue dyue started=true #qmgr: set queue dque enabled=true #qmgr: set server scheduling=true 队列名是dque 5C0 mute node配置 5.1修改 server name(定要内网域名,不然状态会是down) #vi/var/spool/ torque/server name 52启动 pbs mor tpbs mom 53所有节点都执行完后,启动 pbs server # -t quick (关闭pbs s cryer 4pb (启动 pbs serv 54查看节点状态 #pbsnodes-1 free #pbsnoddes - 如果全都显示down,那么可能是 server namc设置有问题。 6.作业管理 6提交qb gsul sccp 30 qs 这里着重介绍第种方式,这样就会涉及pbs脚本的编写。以下摘自网上的两个脚 本 (1)串行计算脚本 #!/bin/sh #PBS-N job name 4PBS-o job log # -e job. err #PBS -q dque cd yourworkdir cho running on hosts hostname echo Time is dale echo Directory is SPWD echo This job runs on the following nodes cat SPBS NODEFILE echo This job has allocated l nodc yourprog 上述脚本利用qsub命令提交后,表小进入 vourworkdir目录 后,提交到dque队列,其作业名为 job name,标准输出和错误输出将分别存在此目 参数后分别设置的是这个作业的名字 job name、标准输出定向到的文件名jbl 录下的job.log和job.er文件中。上述脚木中以APBS开头的儿行的N、-o、-e、 标准错误输出定向到的文件名job.er、作业使用的队列名dque。 作业脚本编写完成后,可以按照下面命令提交作业 结果如卜 20. cluster. local (2)并行计算脚本 4!/bin/sh #PbS-n job name #PBS -o job log #PBS -e job. err #PBS -a douc 4PBS-I nodes=4 cd yourworkdir echo time is date echo Directory is SPWD cho This job runs on the following nodcs cat SPBS NODEFILE NPRoCS-wC-K<SPBS NODEFILE echo This job has allocated NPROCS nodes mpiexec-machinefile SPBS NODEFILE-np SNPRoCS /yourprog 与串行程序的脚木相比,主要不同之处在」在HPBS廾头的1参数后设置: nodes 所需要的进程数,另外请注意需采用 piCCo的命令格式提交并行可执行程序 与串行作业类似,可使用下面方式提交 S gsub par job. pbs 62作业查看qat Sqstat-I Systat 这两条命令都可以查看作业状态,但是加了-1后才能看到 node id的全称,知道 全称才能对作业管理。 Tkey@acluster root]S qstat Job id Na ame User Time Use s Queue -= 一-------- 24. cluster STDIN ke 0 o batch Tkey(@cluster rootS qstat-1 Job id N ame User Time Use s Queue m一 I 24cluster b jtu STDⅠN ey o batch 63作业终止qdel Sqdel 24cluster b 64作业挂起qhod 6.5挂起取消qrls 7MAUI安装 由于 torquc的作业调度器 torquc sched的功能过于简单,因此我们使用MAU来实现作 业调度 7.1下载Maui http:/www.clusterresources.com/products/maui-cluster-scheduler.php 72安装Maui Maui只需在服务节点 server nodc上安装即可 ftar zxvf maul-3.0.0.5.t (注意版本号) cd maui-3.0.0.5/ 配置安装路径及pbs连接(注意实际路径) 4. configure -=/optmaui-300.5-with-pbs-/opV/lorque-300.5 #makc make instal 7.3配置Maui usr/ locali maui/ maui.cfg默认情况就能用,不过可以修改进行髙级运用 7.4添加路径 在etcφ profile后追加Maui路径(注意实际路径)。 #vim /etc/profile MAUF/opt/ maui.2.6p20 [ idu eq0]; then PATH=SPA TH: STORQUE/bin: STORQUE/Shin: SMAUI/bin: SMAUI/sbin else PATH-SPATH: STORQUE/bin: MAUI/bin fi #source /etc/profile (更新 letc/profile使其生效) 7.5启动Maui maui 服务器节点上不用开启 torque sched服务。 【实例截图】
【核心代码】
torque很好用的一款作业管理软件，但是torque的作业调度器过于简单，因此，搭配maui，效果很好。
4.3默认队列设置 fqmgr: create queue dque queue type=execution #qmgr: set server default queue=dque #qmgr: set queue dyue started=true #qmgr: set queue dque enabled=true #qmgr: set server scheduling=true 队列名是dque 5C0 mute node配置 5.1修改 server name(定要内网域名,不然状态会是down) #vi/var/spool/ torque/server name 52启动 pbs mor tpbs mom 53所有节点都执行完后,启动 pbs server # -t quick (关闭pbs s cryer 4pb (启动 pbs serv 54查看节点状态 #pbsnodes-1 free #pbsnoddes - 如果全都显示down,那么可能是 server namc设置有问题。 6.作业管理 6提交qb gsul sccp 30 qs 这里着重介绍第种方式,这样就会涉及pbs脚本的编写。以下摘自网上的两个脚 本 (1)串行计算脚本 #!/bin/sh #PBS-N job name 4PBS-o job log # -e job. err #PBS -q dque cd yourworkdir cho running on hosts hostname echo Time is dale echo Directory is SPWD echo This job runs on the following nodes cat SPBS NODEFILE echo This job has allocated l nodc yourprog 上述脚本利用qsub命令提交后,表小进入 vourworkdir目录 后,提交到dque队列,其作业名为 job name,标准输出和错误输出将分别存在此目 参数后分别设置的是这个作业的名字 job name、标准输出定向到的文件名jbl 录下的job.log和job.er文件中。上述脚木中以APBS开头的儿行的N、-o、-e、 标准错误输出定向到的文件名job.er、作业使用的队列名dque。 作业脚本编写完成后,可以按照下面命令提交作业 结果如卜 20. cluster. local (2)并行计算脚本 4!/bin/sh #PbS-n job name #PBS -o job log #PBS -e job. err #PBS -a douc 4PBS-I nodes=4 cd yourworkdir echo time is date echo Directory is SPWD cho This job runs on the following nodcs cat SPBS NODEFILE NPRoCS-wC-K<SPBS NODEFILE echo This job has allocated NPROCS nodes mpiexec-machinefile SPBS NODEFILE-np SNPRoCS /yourprog 与串行程序的脚木相比,主要不同之处在」在HPBS廾头的1参数后设置: nodes 所需要的进程数,另外请注意需采用 piCCo的命令格式提交并行可执行程序 与串行作业类似,可使用下面方式提交 S gsub par job. pbs 62作业查看qat Sqstat-I Systat 这两条命令都可以查看作业状态,但是加了-1后才能看到 node id的全称,知道 全称才能对作业管理。 Tkey@acluster root]S qstat Job id Na ame User Time Use s Queue -= 一-------- 24. cluster STDIN ke 0 o batch Tkey(@cluster rootS qstat-1 Job id N ame User Time Use s Queue m一 I 24cluster b jtu STDⅠN ey o batch 63作业终止qdel Sqdel 24cluster b 64作业挂起qhod 6.5挂起取消qrls 7MAUI安装 由于 torquc的作业调度器 torquc sched的功能过于简单,因此我们使用MAU来实现作 业调度 7.1下载Maui http:/www.clusterresources.com/products/maui-cluster-scheduler.php 72安装Maui Maui只需在服务节点 server nodc上安装即可 ftar zxvf maul-3.0.0.5.t (注意版本号) cd maui-3.0.0.5/ 配置安装路径及pbs连接(注意实际路径) 4. configure -=/optmaui-300.5-with-pbs-/opV/lorque-300.5 #makc make instal 7.3配置Maui usr/ locali maui/ maui.cfg默认情况就能用,不过可以修改进行髙级运用 7.4添加路径 在etcφ profile后追加Maui路径(注意实际路径)。 #vim /etc/profile MAUF/opt/ maui.2.6p20 [ idu eq0]; then PATH=SPA TH: STORQUE/bin: STORQUE/Shin: SMAUI/bin: SMAUI/sbin else PATH-SPATH: STORQUE/bin: MAUI/bin fi #source /etc/profile (更新 letc/profile使其生效) 7.5启动Maui maui 服务器节点上不用开启 torque sched服务。 【实例截图】
【核心代码】
标签：
好例子网口号：伸出你的我的手 — 分享！
小贴士
感谢您为本站写下的评论，您的评论对其它用户来说具有重要的参考价值，所以请认真填写。
- 类似“顶”、“沙发”之类没有营养的文字，对勤劳贡献的楼主来说是令人沮丧的反馈信息。
- 相信您也不想看到一排文字/表情墙，所以请不要反馈意义不大的重复字符，也请尽量不要纯表情的回复。
- 提问之前请再仔细看一遍楼主的说明，或许是您遗漏了。
- 请勿到处挖坑绊人、招贴广告。既占空间让人厌烦，又没人会搭理，于人于己都无利。
关于好例子网
本站旨在为广大IT学习爱好者提供一个非营利性互相学习交流分享平台。本站所有资源都可以被免费获取学习研究。本站资源来自网友分享，对搜索内容的合法性不具有预见性、识别性、控制性，仅供学习研究，请务必在下载后24小时内给予删除，不得用于其他任何用途，否则后果自负。基于互联网的特殊性，平台无法对用户传输的作品、信息、内容的权属或合法性、安全性、合规性、真实性、科学性、完整权、有效性等进行实质审查；无论平台是否已进行审查，用户均应自行承担因其传输的作品、信息、内容而可能或已经产生的侵权或权属纠纷等法律责任。本站所有资源不代表本站的观点或立场，基于网友分享，根据中国法律《信息网络传播权保护条例》第二十二与二十三条之规定，若资源存在侵权或相关问题请联系本站客服人员，点此联系我们。关于更多版权及免责申明参见 版权及免责申明
网友评论
我要评论