PBS/Torque之部署安装

最新推荐文章于 2024-02-17 19:00:00 发布
最新推荐文章于 2024-02-17 19:00:00 发布
阅读量3k 收藏 5
点赞数
分类专栏： Linux学习
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zxia1/article/details/17115809
版权
本文详述了在浪潮TKS01集群系统上安装部署Torque的过程，包括主节点和计算节点的安装步骤、配置方法以及验证方式。首先确保环境配置，如SSH无密码登陆和依赖库，接着在主节点上执行configure、make和make install命令安装Torque，并通过scp传输安装包到计算节点。然后在计算节点上执行安装脚本。最后配置主节点和计算节点的文件，设置自启动服务，并验证安装效果。
摘要由CSDN通过智能技术生成

        本文是作者在浪潮集群上构建Torque的经验总结。

1. 环境

    本文安装的硬件环境是：浪潮TKS01集群系统，有一个主节点和10个计算节点。以其中的主节点和两个计算节点作为示例，如何安装部署Torque。三个节点的网络配置信息：

节点信息
域名 IP地址 操作系统
mu01 192.168.0.100 RedHat6.0
cu01 192.168.0.1 RedHat6.0
cu02 192.168.0.2 RedHat6.0






注：在/etc/hosts中已经将上述的节点信息写入。


    软件环境：（1）在上述三个节点中预先配置好ssh无密码互登陆，这样的话方便文件的传输和软件的配置，具体做法为使用ssh-keygen生成密钥公钥，将home目录下.ssh/id_rsa.pub拷贝到其它节点上，将其中内容拷贝到authorized_keys。（2）核查安装Torque所依赖的库文件，比如libxml2-devel、openssl-devel、ANSI C compiler和Tcl/Tk等库。（3）下载Torque的安装文件，并解压。本文从Adaptive computing的下载官网上下载了

最低0.47元/天 解锁文章
为伊憔悴
关注
  • 0
    点赞
  • 踩
  • 5
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Torque安装部署方法
Walter的专栏
11-27 1万+
总结： 1、安装系统 2、修改/etc/hosts文件将计算节点服务节点对应的IP加入其中，此处不加则无法进行通信 3、关闭防火墙service iptables stop，此处不停止则无法进行通信 4、安装Torque并将生成的*.sh packet放到各个计算节点中，在计算节点中安装。 5、计算节点需要手动配置config文件，之后再启动pbs_mom，此处不加则pbsnodes时状
linux集群pbs管理,PBS-Torque集群部署
weixin_35671110的博客
05-14 2186
PBS是一个批处理作业和计算机系统资源管理的软件包，主要功能是计算机集群中资源管理、作业调度。 PBS包含openPBS，PBS Pro和Torque三个主要分支；一、基础环境1、主机名和IP控制节点：192.168.1.11 m1计算节点：192.168.1.12 c1计算节点：192.168.1.13 c22、主机配置系统: Centos7.6 x86_64CPU： 4C内存：4G3、关闭防火...
单机安装运行PBS （Torque）
资源备忘
11-03 1290
本文链接：http://blog.csdn.net/kongxx/article/details/8022496 首先从http://www.adaptivecomputing.com/resources/downloads/torque/ 最新的安装包，这里使用的是4.1.2版本，文件名是torque-4.1.2.tar.gz。 安装 [pl
PBS/Torque之安装部署方法
10-22 617
总结： 1、安装系统 2、修改/etc/hosts文件将计算节点服务节点对应的IP加入其中，此处不加则无法进行通信 3、关闭防火墙service iptables stop，此处不停止则无法进行通信 4、安装Torque并将生成的*.sh packet放到各个计算节点中，在计算节点中安装。 5、计算节点需要手动配置config文件，之后再启动pbs_mom，此处不加则pbsnodes时状
Proxmox VE(PVE)备份组件：PBS(Proxmox Backup Server)部署及使用教程
hanziqing的博客
07-12 2万+
Proxmox Backup Server（pbs）是与pve配套的备份解决方案，用于备份和恢复虚拟机、容器和物理主机。通过支持增量、完全重复数据删除的备份，Proxmox Backup Server（pbs）显着降低了网络负载并节省了宝贵的存储空间。凭借强大的加密和确保数据完整性的方法，确保数据安全。提供web界面，可以极其方便的管理备份文件。 PVE集群搭建：Proxmox VE+ceph+物理网络超融合生产环境部署案例 2 环境介绍 2.1...
pbs安装
qq_29684215的博客
10-27 1568
最近要给新集群装PBS作业管理系统，顺便把安装全流程整理一下分享给有需要的朋友。1. 主机名修改 为了便于管理，可以重新修改一下集群每个节点的主机名。 sudo vi /etc/hostname 复制代码 sudo vi /etc/hosts 复制代码 请根据ifconfig中的信息，酌情修改主机名对应的ip地址,并且添加计算节点的ip和主机名2. 建立ssh无密码访问 (参考https://bl..
PBS集群搭建专题（二） | torque 的安装与配置
SecondJanuary
07-10 1万+
headnode上的配置 在 headnode 上安装 torque ./configure --prefix=/usr/local/torque-4.2.3.1 --enable-syslog --enable-debug make make check make install make packagesmake packages 指令会产生独立的5个包，具体作用的话等用到时完全明
安装pbs
资源备忘
11-03 1406
安装pbs简介 本指南将以一台机器为例，演示从安装 PBS，PostgreSQL 到实现一个简单的 apache 日志 ETL 分析程序的完整安装过程。  安装 PBS 编译 下载 TORQUE 源代码： http://www.clusterresources.com/downloads/torque/ 。解压缩后进行编译。  $ tar zxvf torque -2.3.3.tar
PBS集群任务调度系统安装
LonelyLinguist的博客
08-21 1106
本文主要介绍在centos7系统上编译安装pbs集群调度系统软件的步骤
PBS/Torque系列内容总结
12-04 1859
随着互联网技术的发展，海量的数据开始出现，学术界和工业界对大量的计算的需求开始增加。因此，高性能计算平台开始普及，尤其是以集群方式的平台架构开始得到各机构的欢迎。集群方式以其较高的性价比和容易方便的使用方式，开始在国内各大高校中出现。而集群构建和使用中，较为重要的一环就是批处理作业系统和资源管理器的安装部署。目前，集群系统中普遍使用的是PBS系统，该系统以其方便性赢得了大家的认可。
PBS/Torque之说明文档
12-03 2234
本说明文档来自Adaptive Computing的Help。 0 引言 （1）什么是资源管理器
CentOS下torque集群配置（一）-torque安装与配置
热门推荐
D.W 的专栏
03-12 4万+
一、Centos7系统的安装及设置 1、给两台电脑安装CentOS7.0，光盘启动路径修改为：/dev/cdrom 修改主机名称 # hostnamectl set-hostname 2、设置ip地址 # vi /etc/sysconfig/network-scripts/ifcfg-eth0 添加下列属性值
Ubuntu22.04上作业调度管理软件PBS Torque的安装、配置及主要使用方法
最新发布
Blockbuater_drug
02-17 3598
PBS Torque作为一种开源的作业调度和资源管理系统，广泛用于高性能计算环境中。它提供了一个集中式的作业调度器，可以有效地管理计算集群中的作业，并将它们分配给可用的资源。Torque目前最新版本为7.0.1，本文将介绍Linux Ubuntu 22.04上PBS Torque 6.1.3的安装、配置及主要使用方法。以上是PBS Torque 6.1.3在Ubuntu22.04上的安装、基本配置和使用方法。
CentOS 7.6 集群部署 Torque4.2.9 调度系统
weixin_41674971的博客
06-17 963
CentOS 7.6 集群部署 Torque4.2.9 调度系统 1、master节点torque部署：（master）即为在master节点操作
OPENHPC搭建集群
djz0924的博客
06-14 1万+
OpenHPC Cluster buildOPENHPC搭建集群准备管理节点配置配置计算节点添加节点ooo如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 OPENHPC搭建集群 目前搭建HPC的工具有RocksCluster, Xcat, 还有其他的一些工具，OpenHPC是目前高性能集群搭建的主要工具
PBS 安装与使用
资源备忘
11-03 1万+
PBS(Portable Batch System)最初由NASA的Ames研究中心开发，主要为了提供一个能满足异构计算网络需要的软件包，用于灵活的批处理，特别是满足高性能计算的需要，如集群系统、超级计算机和大规模并行系统。PBS的主要特点有：代码开放，免费获取；支持批处理、交互式作业和串行、多种并行作业，如MPI、PVM、HPF、MPL；PBS是功能最为齐全, 历史最悠久, 支持最广泛的本地
centos7安装pbs_torque
05-19
PBS Torque 是一个开源的作业调度系统，可以用于管理计算集群中的作业。在 CentOS 7 上安装 PBS Torque 需要以下步骤： 1. 安装依赖包 ``` yum install -y gcc make openssl-devel libxml2-devel libtool-ltdl-devel libgcrypt-devel ``` 2. 下载并解压 PBS Torque ``` wget http://www.adaptivecomputing.com/downloads/torque/torque-6.1.2.tar.gz tar zxvf torque-6.1.2.tar.gz cd torque-6.1.2 ``` 3. 配置和编译 ``` ./configure --with-default-server=localhost --with-pbs-server-home=/var/spool/torque --enable-gui=no --enable-drmaa=no make make install ``` 4. 配置 PBS Torque 创建一个环境变量文件 `/etc/profile.d/torque.sh`，输入以下内容： ``` export PATH=$PATH:/usr/local/sbin:/usr/local/bin:/usr/sbin:/usr/bin:/sbin:/bin:/usr/local/torque/bin:/usr/local/torque/sbin export LD_LIBRARY_PATH=$LD_LIBRARY_PATH:/usr/local/torque/lib ``` 然后创建一个 PBS Torque 配置文件 `/etc/torque/server_name`，输入以下内容： ``` localhost ``` 5. 启动 PBS Torque ``` pbs_server -t create pbs_sched qmgr -c "create queue batch" qmgr -c "set queue batch queue_type = execution" qmgr -c "set queue batch started = true" qmgr -c "set queue batch enabled = true" qmgr -c "set server scheduling = true" qmgr -c "set server default_queue = batch" qmgr -c "set server log_events = 511" qmgr -c "set server mail_from = adm" qmgr -c "set server query_other_jobs = true" ``` 以上步骤完成后，PBS Torque 就可以正常运行了。你可以使用 `qsub` 命令提交作业，使用 `qstat` 命令查看作业状态。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值