作业调度系统常用命令新版5
作业调度系统
• 系统启动脚本 /etc/init.d/openpbs • Server的系统启动脚本 /etc/init.d/pbs_server • Scheduler系统启动脚本 /etc/init.d/pbs_sched • Mom系统启动脚本 /etc/init.d/pbs_mom
Server端设置
• 初始化server: (第一次运行或者重新配置) /usr/local/sbin/pbs_server –t create
内 容
• • • • 任务管理系统概述 作业调度系统 PBS作业调度系统 作业调度系统的使用
作业管理的组成
• 资源管理器：管理集群的硬件资源及认 证信息等 • 队列管理器：管理当前所有已提交但还 未完成的作业 • 调度器：为作业分配资源
作业管理系统的结构
作业特性比较
系统特性 支持异构平台 用户操作接口 支持DRMAA 支持POSIX批处 理API标准 源代码开放 SGE Unix & NT，多 硬件 API/GUI/CLI/W EB，管理复杂 支持 支持 开放 LSF Unix & NT，多 硬件 API/GUI/CLI/W EB，管理方便 不支持 不支持 不开放 OPEN PBS 仅Unix ，多硬件 PBS PRO 仅Unix ，多硬 件 API/GUI/CLI，功 API/GUI/CLI/W 能少 EB ，管理方便 支持 支持 开放 支持 支持 付费后开放
mom端设置
• mom配置目录： /var/spool/pbs/mom_priv/ • mom配置文件： /var/spool/pbs/mom_priv/config
# MOM server configuration file # if more than one value, separate it by ## rule is defined by the name $ideal_load 1.5 $max_load 2 ## host allowed to connect to Mom server $restricted *. ## log event : # 0x1ff log all events + debug events # 0x0ff just all events $logevent 0x0ff ## host allowed to connect to mom server $clienthost node1 ## alarm if the script hang or take very $prologalarm 30
slurm 常用命令
slurm 常用命令1. sinfo：查看集群中可用的节点信息，包括节点名、状态、SLURM版本等。
2. squeue：查看作业队列，包括作业ID、用户、提交时间、状态等。
3. sbatch：提交作业，可以指定作业的名称、输出文件、运行时间、节点数等参数。
4. scancel：取消作业，需要指定作业ID。
5. srun：运行作业，在交互模式下使用。
8. scontrol show job <jobid>：查看作业的详细信息，包括作业ID、用户、提交时间、状态、节点信息等。
10. scontrol update NodeName=<nodename> State=<state>：修改节点的状态，可以将节点设置为down状态以便进行维护。
11. sinfo -t idle：查看空闲节点，可以用来选择节点进行作业提交。
12. sbatch --time=<time>：设置作业的运行时间，可以指定格式为HH:MM:SS。
13. squeue -u <username>：查看指定用户的作业。
14. scontrol hold <jobid>：暂停作业的运行。
16. squeue -j <jobid> -o %t：查看作业的状态，可以用于判断作业是否已经完成。
17. scontrol update JobId=<jobid> Priority=<priority>：修改作业的优先级，可以调整作业在作业队列中的排序。
18. squeue -S <field>：按照指定字段排序，可以用于选择最优的节点。
19. scontrol show users：查看当前系统中的用户信息。
20. sbatch -n <numtasks>：指定作业使用的CPU核心数。
22. scontrol show partition：查看集群的分区信息，包括分区名称、节点信息等。
操作系统——作业调度
操作系统——作业调度实验⼆作业调度模拟程序⼀、⽬的和要求 1. 实验⽬的 （1）加深对作业调度算法的理解； （2）进⾏程序设计的训练。
2．实验要求 ⽤⾼级语⾔编写⼀个或多个作业调度的模拟程序。
单道批处理系统的作业调度程序。
作业⼀投⼊运⾏，它就占有计算机的⼀切资源直到作业完成为⽌，因此调度作业时不必考虑它所需要的资源是否得到满⾜，它所运⾏的时间等因素。
作业调度算法： 1) 采⽤先来先服务（FCFS）调度算法，即按作业到达的先后次序进⾏调度。
总是⾸先调度在系统中等待时间最长的作业。
2) 短作业优先 (SJF) 调度算法，优先调度要求运⾏时间最短的作业。
3) 响应⽐⾼者优先(HRRN)调度算法，为每个作业设置⼀个优先权(响应⽐)，调度之前先计算各作业的优先权，优先数⾼者优先调度。
RP (响应⽐)＝作业周转时间 / 作业运⾏时间=1+作业等待时间/作业运⾏时间每个作业由⼀个作业控制块JCB表⽰，JCB可以包含以下信息：作业名、提交（到达）时间、所需的运⾏时间、所需的资源、作业状态、链指针等等。
作业的状态可以是等待W（Wait）、运⾏R（Run）和完成F（Finish）三种之⼀。
每个作业的最初状态都是等待W。
⼀、模拟数据的⽣成 1．允许⽤户指定作业的个数（2-24），默认值为5。
2. 允许⽤户选择输⼊每个作业的到达时间和所需运⾏时间。
3.（**）从⽂件中读⼊以上数据。
4.（**）也允许⽤户选择通过伪随机数指定每个作业的到达时间（0-30）和所需运⾏时间（1-8）。
⼆、模拟程序的功能 1．按照模拟数据的到达时间和所需运⾏时间，执⾏FCFS, SJF和HRRN调度算法，程序计算各作业的开始执⾏时间，各作业的完成时间，周转时间和带权周转时间（周转系数）。
2. 动态演⽰每调度⼀次，更新现在系统时刻，处于运⾏状态和等待各作业的相应信息（作业名、到达时间、所需的运⾏时间等）对于HRRN算法，能在每次调度时显⽰各作业的响应⽐R情况。
电力调度命令管理及日常运作
35KV电力电缆线路、线路断路器、线路三工位隔离开关、母联断 路器、母联三工位隔离开关、母线、整流机组、1500V直流出线、 直流正负母线、回流母线、直流开关柜、35KV/0.4KV动力变压器、 400V进线柜、联络柜及三级负荷总断路器。
2021/4/15
18
(3) 降压变电所及跟随变电所：
一、电力调度与各专业的接口关系
控制中心设有行调、电调、环调三个专业调度，各调度之间紧 密配合协作，在值班期间由主任调度员统一指挥管理，共同为行车 安全服务，为广大市民提供安全、快捷、周到的乘车服务。电力调 度与各专业的接口如下：
查看SCADA工作站是否处于正常状态； ① 交接班记录本要记清上级指示、命令、报告、申请及联系事宜等； ② 尚未结束的作业、抢修地点及受令人姓名、恢复送电时间、停电区段
和应注意事项等； ③ 设备运行方式变更原因及注意事项； ④ 通讯设备正常，图纸资料存放整齐。
2021/4/15
14
3、交接班注意事项
① 交接班手续完毕后，交、接班电力调度员在交接班记录本中签字， 注明时间，交班电力调度员方可离开。
② 发生事故、进行运行方式的更改和重要的检修作业在倒闸操作时， 不能交接班，但在事故处理或操作告一段落，并有详细记录，不妨 碍供电安全的情况下可进行交接班。
③ 接班电力调度员因故未到，交班电力调度员应继续执行调度任务， 不得擅自离岗，并报告电力调度主管领导及OCC值班主任调度员， 交接班电力调度员不得私下商量调班顶班而连续值两班。
（6）凡属电力调度管辖的一次高压设备及二次设备和直流屏、中央信号 屏由电力调度确定运行方式及状态，并进行调度操作、运行管理和 指挥事故处理。
2021/4/15
调度命令
各铁路局：为适应铁路局直管站段体制要求，针对调度整合后各工种调度管辖范围和工作量加大、机车长交路增多以及发布行车调度命令形式多样的实际，为规范铁路行车调度命令，根据《铁路技术管理规程》、《铁路运输调度规则》、《铁路行车事故处理规则》、《事故救援规则》、《接发列车作业标准》、《调车作业标准》以及铁道部颁布的其他规章和发布的相关文件的有关规定，铁道部重新制定了《铁路运输调度规则》(铁运…2005‟114号)附件二“常用行车调度命令用语”，现予发布。
新的“常用行车调度命令用语”为列车调度员发布调度命令和有关行车人员执行调度命令提供了统一标准，为安全监察部门检查监督调度命令发布和执行提供了依据，为保证铁路行车安全提供了重要保证。
为严格调度命令的发布，特做如下规定：一、发布行车调度命令的原则行车调度命令是铁路行车中遇非正常情况下采取的作业方式的指令。
列车调度员必须严格按规定发布调度命令，有关行车人员必须严格执行调度命令。
1．指挥列车运行的命令和口头指示，只能由列车调度员发布。
2．上级调度下达的调度命令，下级调度必须严格执行。
3．凡与指挥行车无关的内容不得以行车调度命令发布。
4．发布调度命令前，列车调度员应详尽了解现场情况，听取有关人员意见后，方可发布调度命令。
5．调度命令必须先拟后发，不准先口头通知后拟发或只给调度命令号码不发内容。
行车命令须一事一令，严禁一令多用或以口头指示代替书面命令。
6．发布的调度命令内容必须正确、完整、清晰，受令处所必须齐全。
7．发布施工计划调度命令，不准夹带与受令处所无关的内容和命令。
8．施工封锁或开通的调度命令，列车调度员必须得到车站值班员的请求(CTC区段无车站值班员的车站，由施工单位负责人请求)后，方可发布。
9．采用计算机发布调度命令时，必须严格遵守“一拟、二签（按规定需领导、值班主任签发）、三下达、四确认签收”的发布程序。
受令人必须认真核对命令内容并及时签收。
10．采用电话发布调度命令时，必须严格遵守“一拟、二签（按规定需领导、值班主任签发）、三发布、四复诵、五下达命令号码和时间”的发布程序办理。
调度命令名词解释
调度命令名词解释调度（Scheduling），是指计算机系统中对于任务的安排与分派。
调度是操作系统的重要功能之一，其主要目标是优化系统资源的利用，提高系统性能和用户感知度。
在计算机系统中，调度可以分为多种类型，如进程调度、作业调度、线程调度等。
不同类型的调度侧重于不同的任务单位，但目标都是通过合理的任务分配和优先级管理以最大化系统的运行效率。
进程调度是指操作系统将系统资源（如CPU、内存、设备等）分配给不同进程的过程。
进程调度有多种算法，如先来先服务（FCFS）、最短作业优先（SJF）、时间片轮转（RR）等。
这些算法根据进程的特点和需求来决定如何进行进程的选择与调度，以提供更好的系统性能。
作业调度是指对于一组作业的调度和执行顺序的安排。
作业调度主要关注的是作业的提交和完成时间，以及作业之间的依赖关系。
作业调度算法包括最早截止时间优先（EDF）、先来先服务（FCFS）等，它们通过合理分配系统资源来保证作业的顺利进行。
线程调度是指对于多线程任务的调度和分配。
线程是操作系统中最小的任务单位，线程调度的目标是平衡线程之间的资源占用和执行速度，提供更好的并发性能。
常见的线程调度算法有优先级调度、时间片轮转等，它们通过设置线程的优先级和时间片来控制线程的执行顺序和时间片分配。
除了以上几种调度方式，还有一些特殊的调度算法应用于特定领域。
例如实时调度用于对实时任务的调度，磁盘调度用于磁盘访问的优化等。
总之，调度是操作系统中的重要功能，通过合理的任务分配和优先级管理来实现系统资源的有效利用。
各种调度算法根据不同任务单位的特点和需求，选择适合的调度方式和策略，以提高系统性能和用户体验。
slurm常用命令
slurm常用命令
Slurm是一种流行的开源的工作负载管理系统，它用于管理和调度大型计算机集群上的作业。
下面是几个常用的Slurm命令：
1. srun：用于提交任务或者交互式任务。
可用于执行单个命令或脚本，或者运行多个任务。
使用srun命令时可以指定任务的数量、分配的资源等参数。
2. sbatch：用于提交批处理任务。
可以通过脚本文件提交任务，并指定作业的名称、资源需求、任务数量等参数。
3. squeue：用于查看当前集群上正在运行的任务和等待运行的任务。
可以查看任务的状态、作业ID、任务名称等信息。
4. sacct：用于查看任务的历史记录。
可以查看任务的开始时间、结束时间、运行时间、CPU利用率等信息。
5. scancel：用于取消正在运行的任务或等待运行的任务。
可以根据任务ID或者作业ID取消任务。
6. scontrol：用于管理和修改集群的状态和配置。
可以用于管理集群节点、队列、分区等。
以上是Slurm的一些常用命令，使用这些命令可以方便地管理和调度集群上的任务。
- 1 -。
调度命令讲义
⑴临时变更(改按电话闭塞法行车除外)或恢复原行车闭塞法。
⑵设有双线双向闭塞设备的区间且作用良好，双线反方向行
车； ⑶有计划封锁施工开通后，指定1，2，3……列限速。 ⑷临时限速（指未纳入运行揭示调度命令的限速，下同）。 ⑸临时停运列车、加开单机。 ⑹旅客列车以外的列车在非到发线上接车或发车。 ⑺半自动闭塞区间，超长列车头部越过出站信号机(未压上 出站方面的轨道电路)发车。 ⑻进站（接车进路）信号机故障的引导接车。 ⑼机车信号、列车运行监控记录装置、列尾装置故障。 ⑽列控车载设备转入或退出隔离模式。
⑾列控车载设备控车人工转换LKJ方式行车或LKJ方
式行车人工转换列控车载设备控车。 ⑿动车组在区间被迫停车后，准许返回后方站。 ⒀特殊情况下，不能在基本进路上接发动车组旅客 (检测)列车。 ⒁调度集中区段，由列车调度员办理接、发列车， 调度命令用作允许列车运行的行车凭证。 ⒂铁路局《行车组织规则》规定可以利用列车调度 电话发布、转达的调度命令：
速度
命 令 内 容
一、6月15日0时00分至7时00分，因胶济线济南东站施工，施工期间： 1、济南东站上、下行进站信号停用，列车凭引导手信号的显示，以不超过20km/h速度 进站。 2、胶济线济南站客场至济南东站至黄台站间上、下行线，京胶联络线济南东站至北园 站间上、下行线，胶济客运专线章丘站客运车场至济南东站间上行线停用基本闭塞法， 改用电话闭塞法。济南东站上行列车、济南东站胶济线下行列车、济南站客场胶济线下 行列车、北园站京胶联络线下行列车，黄台站上行列车、章丘站客运车场上行列车凭路 票发车。 二、6月15日0时00分至3时00分，因胶济线济南东站施工，施工期间： 胶济客运专线济南东站至章丘站客运车场间下行线停用基本闭塞法，改用电话闭塞法。 行车方式变 济南东站 胶济客运专线下行列车凭路票发车。 化 三、6月15日3时00分至7时00分，因胶济线济南东站施工，施工期间： 济南东站5道（Ⅵ道代5道）胶济客运专线方向下行出站信号停用，列车凭绿色许可证发 车。 四、自6月15日7时00分起 ，启用济南东站新微机联锁设备。
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
2
bsub 直接提交作业
串行程序 COMMAND可以直接使用用户的程序名 例如，对一个串行作业mytest， 提交方式为： bsub –n 1 –q QS_Norm –o mytest.out ./mytest
3
jgyj
bsOMMAND为“–a intelmpi mpirun.lsf 程序名” 因为并行作业必须用到intelmpi库，所以提交的时 候必须使用–a intelmpi mpirun.lsf 例：使用12个cpu的并行作业mytest，提交方式为 ： bsub –n 12 –q QN_Norm –o mytest.out –a intelmpi mpirun.lsf ./mytest
4
jgyj
bsub 使用脚本提交作业
bsub 命令可以使用输入脚本多次提交具有相同 参数的作业：
#BSUB –n Z #BSUB –q QUEUENAME #BSUB –o %J.out #BSUB –e %J.err COMMAND
5
提交 bsub < 脚本 更多脚本例子，参照计算平台网站上的作业提交 文档 jgyj
bsub
混合方式 bsub –m “n1” < 脚本名 指定机器提交作业
6
jgyj
bhosts显示各节点作业相关情况
Bhosts bhosts <hostname>
7
jgyj
bjobs查看作业
bjobs –w bjobs –r 显示正在运行的作业 bjobs –a 显示正在运行的和最近完成的作业 bjobs -p 显示等待运行的作业和等待原因 bjobs –s 显示正在挂起的作业和挂起的原因 bjobs -l 显示该作业的所有信息
8
jgyj
bhist
bhist 显示最近完成作业或正在运行作业的 历史情况 bhist <jobid>
9
jgyj
bkill 删除不需要的作业
bkill <jobid> bkill –r <jobid>
10
jgyj
bswitch 更改作业队列
如果作业提交一直pend，可以更改作业队 列 bswitch -q 目标队列 jobid
11
jgyj
bpeek 监视作业运行状态
bpeek 当作业正在运行时显示它的标准输 出，监视作业运行 bpeek <jobid>
12
jgyj
bacct
作业统计 bacct -b -u 账号 -C 2012/05/02,2013/04/0 bacct -l 122211
13
jgyj
作业调度系统常用命令
1
jgyj
bsub 直接提交作业
bsub –n z –q QUEUENAME –i inputfile –o outputfile COMMAND 其中z代表了提交作业需要的cpu数，–q指定作业 提交到的队列，如果不采用–q选项，系统把作业 提交到默认作业队列（作业队列详细介绍请看下 一节）。inputfile 代表程序需要读入的文件名（ 例如 namelist等），outputfile 代表一个文件， 作业提交后标准输出的信息将会保存到这个文件 中。COMMAND是用户要运行的程序