linux作业管理系统pbs,集群上作业提交系统LSF和PBS的使用与简介

集群上作业提交系统的使用与简介

LSF作业提交系统

bsub：作业提交

通用方法

bkill：删除作业

bjobs：查看作业

bqueues：查看队列信息

PBS作业提交系统

qsub：作业提交

通用方法

qdel：删除作业

qstat：显示作业状态

pbsnodes：显示集群中所有节点信息

LSF作业提交系统

bsub：作业提交

通用方法

#BSUB -n num

#BSUB -l nodes=1:ppn=1

#BSUB -q queue

#BSUB -o path

#BSUB -e errorPath

#BSUB -J jobName

#BSU -I

-n：指定num为计算核心数

-q：指定queue队列

-o：将标准输出重定向到path

-e：将标准错误信息重定向到errorPath

-J：指定jobName为作业名称

-I：交互模式

bkill：删除作业

删除作业12345：

bkill 12345

bjobs：查看作业

bqueues：查看队列信息

PBS作业提交系统

PBS是一个作业调度系统，常用于分布式高性能计算集群的作业管理。

qsub：作业提交

通用方法

在集群上使用qsub run.pbs提交作业，run.pbs一般包括这些信息：

#PBS -N jobName

#PBS -l nodes=1:ppn=1

#PBS -q queue

#PBS -o path

#PBS -e errorPath

#PBS -l walltime=800:00:00

cd ./home/myJob

./job

-N：指定jobName为作业名

-l：用来定义资源列表，nodes=1指定该作业运行的节点数量为1，ppn=1指定每个节点需要1个cpu。walltime指定作业运行时间，800：00：00代表800个小时。

-q：指定queue队列

-o：将标准输出重定向到path

-e：将标准错误信息重定向到errorPath

最后两行是进入作业目录并执行该作业

qdel：删除作业

删除作业12345：

qdel 12345

强制删除作业12345：

qdel -p 12345

15s后删除作业12345：

qdel -W 15 12345

qstat：显示作业状态

查看所有作业：

qstat -q

查看作业12345：

qstat -f 12345

pbsnodes：显示集群中所有节点信息

查看闲置节点：

pbsnodes -l free

linux作业管理系统pbs,集群上作业提交系统LSF和PBS的使用与简介相关推荐

【译文】MapReduce：大型集群上的简化数据处理
作者:Jeffrey Dean 和 Sanjay Ghemawat 摘要: MapReduce是一个编程模型,以及处理和生成大型数据集的一个相关实现,它适合各种各样的现实任务.用户指定计算的map和r ...
MapReduce作业在Hadoop完全分布式集群上运行的问题与思考（持续更新）
1.集群已搭建好且通过了WordCount测试,但是在eclipse上开发的程序却仍然是只在namenode上运行不知道是不是没有配置好eclipse上的Map/Reduce Locations,个 ...
在Linux集群上部署Spark之前准备
在Linux集群上部署Spark Spark安装部署比较简单, 用户可以登录其官方网站(http://spark.apache.org/downloads.html) 下载Spark最新版本或历史版本 ...
linux集群上的SCHRODINGER 分子对接工作流程
文章目录前言一.总体工作流简介二.ligprep参数介绍三.grid_gen_from_pv.py 参数介绍四.GVSrun参数介绍五.相关文件六.时间预估六. 特别感谢前言 gli ...
apache ignite_Kubernetes集群上的Apache Ignite和Spring第1部分：Spring Boot应用程序
apache ignite 在之前的一系列博客中,我们在Kubernetes集群上启动了一个Ignite集群. 在本教程中,我们将使用先前在Spring Boot Application上创建的Ign ...
Kubernetes集群上的Apache Ignite和Spring第1部分：Spring Boot应用程序
在之前的一系列博客中,我们在Kubernetes集群上启动了一个Ignite集群. 在本教程中,我们将使用先前在Spring Boot Application上创建的Ignite集群. 让我们使用Sp ...
如何轻松地将可访问LAN的Pod部署到Kubernetes集群上
撰者 | Jack Wallen 译者 | Katie,责编 | Jerry 来源 | CSDN云计算封图 | CSDN 下载自视觉中国想要在Kubernetes集群上部署可访问LAN的Pod来达 ...
mapreduce复制连接的代码_MapReduce：在大型集群上简化数据处理（2）
特别说明这是一个由simviso团队所组织进行的基于mit分布式系统课程翻译的系列,由知秋带领和其他成员一起翻译的课程以及课程当中涉及的论文翻译. 由于微信排版功能有限,想要看最新版文档的小伙伴,请 ...
第七章：在Spark集群上使用文件中的数据加载成为graph并进行操作（2）
Spark-shell启动后我们可以在控制台看到起运行信息: 点击作业ID即可查看Spark shell运行信息: 下面我们就开始在集群上通过读取hdfs文件的方式来构建graph对象,首先要做的就是 ...

linux作业管理系统pbs,集群上作业提交系统LSF和PBS的使用与简介

linux作业管理系统pbs,集群上作业提交系统LSF和PBS的使用与简介相关推荐

最新文章

热门文章