PBS系统提交任务后状态很快从Q-R-C怎么解决？

于 2022-11-10 09:02:00 发布
阅读量1k 收藏
点赞数
文章标签： linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u6546/article/details/127782036
版权

本人非计算机专业，对linux系统了解有限，在向集群提交任务时，任务状态出现Q-R-C的变化（并不是一直有这种情况，有时候能够提交上去，有时候不行”

具体描述，采用一款软件，在软件界面提交任务，该软件会自动在PBS队列里提交任务，提交后有时会出现上述问题，且一般持续数个小时

按qstat -f jobID，显示报错信息如下：

 队列已经分配了计算的核，但是出现“Bad UID for job execution，REJHOST=node15 MSG=cannot find user 'liujing' in password file"

请问这种问题应该怎么解决？

u6546
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
【PBS环境】服务器批处理作业 & 脚本如何提交 qsub, qdel, qstat
weixin_43606515的博客
01-08 4364
小白入门PBS，一脸懵逼，记一下主要命令和脚本
pbs子节点为free，但queue为Q的几种可能解决方法
ipcas_oasis的博客
02-10 2402
经常出现这种情况，明明子节点是free的，但就是提交不了任务。可能解决方法：一：用root用户和普通用户（提交作业的普通用户）从主节点用ssh登录各子节点。防止主节点没有登录节点的权限。二：qdel all 然后  qterm -t immediate 然后 pbs_server，如果之前的任务还在，那就等等或者重复几次，一直到qstat没有任何东西为止。不过在重新提交任务之前，一定要确定所有的可...
如何解决PBS作业系统有空节点但是作业全是Q的状态
m0_46310360的博客
03-21 1330
/etc/init.d/文件夹里的pbs_mom pbs_sched pbs_server trqauthd是pbs相关的四个服务。如果pbs出问题，应该是这里面的某个服务没有正常运行。刚才就是/etc/init.d/pbs_mom没有正常运行。可以用/etc/init.d/pbs_mom status 查看运行状态，/etc/init.d/pbs_mom restart 可以重启 ......
PBS 排队系统一直不能运行
DIYER糍粑的学习小站
07-23 7308
PBS 排队系统一直不能运行 tips 看到木虫社区有人发帖，为了帮助到更多的人，所以把问题和解决都贴过来。 问题 老板在集群上开了一个账户给我，但是提交PBS脚本后，qstat状态一直显示为C，cpu运行时间也全部为0。通过查看邮件报错信息，显示为An error has occurred processing your job, see below. Post job file ...
分布式初探——分布式事务与两阶段提交协议
TechFlow的博客
02-01 332
今天的文章咱们聊的是分布式原理当中的原子性，也称为分布式事务。不知道会不会有人觉得奇怪，分布式系统CAP原则当中并没有原子性，这个原子性是从哪里冒出来的？ 其实并不奇怪，之前我们在介绍各种一致性原则的时候，虽然没有明确提出来，但是原子性的相关内容已经隐藏在其中了。让我们回顾一下，分布式系统当中的一致性简单可以分为强一致性和弱一致性。强一致性很好理解，简单可以理解成主节点每次更新都通过同步的方式，...
linux 查看进程关系,Linux系统中查看进程和计划任务管理
weixin_39941721的博客
04-28 386
 各位小伙伴们大家好，本次给大家带来的是Linux操作系统中的进程和计划任务的管理，首先大家都知道程序是保存在外部存储介质(如硬盘、光盘)中的可执行机器代码和数据的静态集合，而进程是在CPU及内存中处于动态执行状态的计算机程序，在Linux系统中，每个程序启动后可以创建一个或多个进程。例如：提供Web服务的httpd程序当有大量用户同时访问Web页面时，httpd程序可能会创建多个进程来提供...
dask-jobqueue:在PBS，SLURM和SGE等工作调度程序上部署Dask
05-01
在工作队列系统上部署Dask 轻松部署Dask在诸如PBS，Slurm或SGE之类的工作排队系统上分发。 请参阅以获取更多信息。 执照 新的BSD。 请参阅。
pbs作业调度系统讲义
07-10
pbs作业调度系统
app-geocoding:用于地理编码任务的PyBossa演示应用程序
05-13
该演示项目展示了如何使用PyBossa解决地理编码问题。 该项目是一个简单的演示，使用OpenLayers JavaScript库加载地图，将地图居中并在地图上添加一个点，以标记城市公园的位置。 由于使用了OpenLayers，因此可以将...
MGate-4101-MB-PBS Modbus串口转PROFIBUS从站网关用户手册
最新发布
04-28
MGate-4101-MB-PBS Modbus串口转PROFIBUS从站网关用户手册
将 MATLAB 函数提交到集群：在 gridengine/torque/PBS 集群上运行 MATLAB 函数-matlab开发
06-01
使用 qsub_submit_cm，可以将 MATLAB 计算提交到集群中。 输入在共享网络驱动器上传递，输出也在那里收集。 可选地，一旦计算完成，可以在提交主机上执行回调。 在...
关于公司服务器上LBS上仿真的任务相关命令
weixin_38753095的博客
11-26 369
PBS 是公开源代码的作业管理系统，在此环境下运行，用户不需要指定程序在哪些节点上运行，程序 所需的硬件资源由PBS 管理和分配。 1、PBS 命令 PBS 提供4 条命令用于作业管理。 (1) qsub 命令—用于提交作业脚本 命令格式： qsub [-a date_time] [-c interval] [-C directive_prefix] [-e path] [-I] [-j join] [-k keep] [-l resource_list] [-m mail_options] [-M use
linux作业状态C,Linux中作业控制命令
weixin_29327525的博客
05-13 243
门见山，最近.NET劝退师要在linux上写些长时间运行的脚本，获取Azure BlobStorage存储的数据。记录一下Linux中后台执行作业的命令。Linux作业作业(Job)是shell管理的进程(每个job都有一个关联的PID)，每个作业会被分配一个线性job ID。有两种形式的作业:Foreground: 当你在终端窗口输入命令，这个命令将会占据终端窗口，直到命令执行完成， 这是一个前...
Jupyterhub batchspawner on PBS
DPnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnnice的博客
04-28 870
目标： 利用 jupyterhub 自定义 spawner batchspawner 在PBS批量集群上运行Notebook。 架构图 运行截图 软件版本 软件 版本 下载地址 pbs pbspro_19.1.3.centos_7 https://github.com/openpbs/openpbs/releases/ jupyterhub 1.2.2 pip install jupyterhub==1.2.2 batchspawner 1.1.0 pip instal
LXC+PBS+集群调度 msg: 'Bad UID for job execution MSG=connection to mom timed out'
Wiil的博客
11-17 3522
LXC+PBS MSG=connection to mom timed out
一次AIX6.1 +oracle11gR2 User not found in /etc/passwd file的解决方法
waycome's blog
12-19 2503
系统 AIX 6.1 错误提示：oracle用户下 ./runInstaller 出现An internal error occurred within cluster verification framework Unable to get the current group窗口 这个错误比较奇葩，除了 HP-UX Solaris的系统是需要打补丁之外（请参见：http://www.stec
Centos7安装-多节点Torque
u012460749的博客
11-20 8091
Centos7安装-多节点Torque1 简介PBS(Portable Batch System)最初由NASA的Ames研究中心开发，主要为了提供一个能满足异构计算网络需要的软件包，用于灵活的批处理，特别是满足高性能计算的需 要，如集群系统、超级计算机和大规模并行系统。PBS的目前包括openPBS, PBS Pro和Torque三个主要分支. 其中OpenPBS是最早的PBS系统, 目前已经没有
集群搭建——SGE与PBS
軒轅劍的博客
07-15 2975
集群搭建——SGE与PBS 主要的基础配置和应用配置到此一个小阶段就结束了 现在需要把所有的命令写成自动化脚本形式 需求1： 新增一个空白的初始节点，怎么把它添加到集群中并具有之前所有计算节点的相关配置 需求2： 把现在的所有节点删除，使用自动化脚本建立登录节点和计算节点，做好所有的相关配置 需求3： 经过验收之后，把这套东西部署到物理机 ...
torque--客户端使用torque
zhuimuzhuimu的博客
04-15 3267
客户端使用torque怎么在随便一台客户端上使用torque服务呢首先， 1从服务器端生成的client.sh（torque-package-clients-linux-x86_64.sh）的那个脚本复制过来， 2然后在客户端运行 client.sh 3再运行trqauthd /usr/local/sbin/trqauthd就可以使用了以下是trqauthd的说明文档cat /home/to
PBS提交作业时，如何指定环境？
09-09
### 回答1： 在 PBS 提交作业时，你可以使用 `-l environment=value` 参数来指定环境。例如： ``` qsub -l environment=myenv jobscript ``` 其中 `myenv` 是你希望使用的环境的名称，`jobscript` 是你要提交的作业脚本的文件名。 注意，你需要预先在计算机系统上定义这个环境，并且你需要有足够的权限来使用它。 ### 回答2： 当使用PBS（Portable Batch System）来提交作业时，我们可以通过指定环境来确保作业在特定环境中执行。 首先，我们需要在PBS作业脚本中指定所需的环境。这可以通过在PBS脚本的开头使用特定的指令来实现。例如，我们可以使用“#PBS”指令来设置环境变量，指定作业所需的软件包和库，以及其他必要的参数。 如果我们想在特定的节点上运行作业，我们可以使用“#PBS -l nodes=<node>:ppn=<num>”指令来指定节点和每个节点的任务数。其中，<node>表示节点的名称或节点数，<num>表示每个节点的任务数。这样，作业将被限制在指定的节点和任务数上运行。 另外，我们还可以使用“#PBS -q <queue>”指令来指定作业提交到哪个队列中。队列是根据计算资源可用性而创建的。通过将作业提交到适合的队列，我们可以更好地管理作业的调度和资源分配。 当我们完成PBS作业脚本的编写后，我们可以使用“qsub”命令将作业提交到PBS系统中。同时，我们还可以使用“qstat”命令来查看作业的状态和资源使用情况。 总之，通过在PBS作业脚本中指定环境相关的参数和指令，我们可以确保作业在特定的环境中执行，并根据需求进行资源分配和管理。 ### 回答3： 在提交PBS作业时，我们可以通过指定环境来确保作业能够在特定的环境中正确运行。以下是一些指定PBS作业环境的方法： 1. 在PBS脚本中指定环境变量：可以使用PBS脚本中的export命令，通过设置环境变量来指定特定的环境。例如，可以设置PATH变量以确保使用特定版本的软件。 2. 使用module命令加载环境模块：许多HPC集群提供了module命令，可以用来加载和管理不同的软件环境模块。通过使用module命令，可以加载所需的软件环境模块，并在PBS脚本中调用所需的软件。 3. 使用PBS的软件模块：一些PBS作业管理系统提供了自带的软件模块管理功能。可以使用这些功能来指定特定的软件环境。例如，可以使用PBS的module命令加载和管理所需的软件环境模块。 4. 在PBS脚本中使用特定的执行命令：如果需要在作业提交时指定特定的命令或程序执行环境，可以在PBS脚本中直接使用这些命令。例如，可以在PBS脚本中执行conda activate命令来激活特定的conda环境。 总而言之，指定PBS作业环境可以通过设置环境变量、加载环境模块、使用PBS的软件模块或在PBS脚本中直接执行特定的命令来实现。这样可以确保作业在特定的环境中执行，从而提高作业的准确性和可靠性。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值