slurm投递任务内存如何根据线程自动变化

-麦_子-

已于 2023-01-07 11:16:39 修改

阅读量310

点赞数 1

分类专栏： slurm 文章标签：云计算服务器

于 2023-01-07 11:15:41 首次发布

本文链接：https://blog.csdn.net/u014182497/article/details/128588929

版权

slurm 专栏收录该内容

3 篇文章 0 订阅

订阅专栏

使用场景：投递任务时不设置内存，内存根据线程数自动设置，比如线程参数设置为2，内存默认为4G，线程数设置为4，内存默认为8G。

在slurm.conf配置文件中的分区设置中增加DefMemPerCPU参数即可。

例如设置每一个线程对应2G内存：

PartitionName=comp Nodes=dummynode0,dummynode1 Default=YES MaxTime=INFINITE State=UP DefMemPerCPU=2048

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

-麦_子-

关注关注

1
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
slurm投递任务内存如何根据线程自动变化

使用场景：投递任务时不设置内存，内存根据线程数自动设置，比如线程参数设置为2，内存默认为4G，线程数设置为4，内存默认为8G。
复制链接

扫一扫

专栏目录

slurm在ubuntu上的搭建

04-07

slurm在ubuntu上的搭建

pyslurm:Slurm 的 Python 接口

08-04

PySlurm：Python 的 Slurm 接口概述目前 PySlurm 正在开发中，以从它在 Slurm C API 之上的薄层移动到面向对象的接口。此版本基于 Slurm 20.02。先决条件这个 PySlurm 分支已经过测试： Cython 0.19.2，以及...

参与评论您还未登录，请先登录后发表或查看评论

查看文件系统容量

ligeforrent的专栏

03-17

630

查看硬盘容量状态 df -h 查看文件夹及子系统空间 du {目录}展示此文件夹及所有子文件夹的占用空间 du -k(-m,-g) 用k(M,G)为单位展示空间 du -h 用k,M,G为单位展示人可读的占用空间 du -h --max-depth=1 定义最大的递归深度。

slurm设置根据投递参数设置线程和内存上限

小猪打呼噜

01-07

957

slurm设置根据投递参数设置线程和内存上限

Slurm.conf配置文件

weixin_43537820的博客

11-09

5053

Slurm配置文件详情

Slurm开发入门介绍

h_m_l的博客

06-22

2225

目录 1.形势分析 1.1.我国新基建战略与先进计算产业 1.2数据中心/云计算中心/超算中心的核心部件以X86服务器为主 1.3 大国在HPC领域的较量 2.1.调度技术一览 2.2 Slurm 2.2.2.Slurm的关键功能 2.3.应用 2.3.1超算应用 2.3.2应用范式 2.4.资源 2.4.1.集群 2.4.2.计算 2.4.3.网络 2.4.4.存储 1.形势分析 1.1.我国新基建战略与先进计算产业 1.2.数据中心/云计算中心/超算中..

生信工作流框架搭建 | 04-nextflow与Slurm高性能计算

duoluka的博客

04-03

1300

HPC高性能计算平台如何运行nextflow

在ubuntu环境下搭建slurm集群

snow5255的博客

07-04

2275

此处以单节点集群举例（单个节点既作为管理节点，又作为计算节点）NodeName=mu01 CPUs=36 State=UNKNOWN # 本行可以通过 `slurmd -C` 获取PartitionName=compute Nodes=mu01 Default=YES MaxTime=INFINITE State=UP # 创建一个名为compute的队列有多少个节点，就写多少行刚出厂的新机器，其内存容量可能发生减少，减少的量在几兆到几十兆之间。

linux查看机器cpu,mem,df等

xxt_

07-19

2963

1.查看系统 cat /etc/redhat-release CentOS release 6.5 (Final) 2.查看内核版本 uname -a Linux dujuantest-3 2.6.32-431.el6.x86_64 #1 SMP Fri Nov 22 03:15:09 UTC 2013 x86_64 x86_64 x8 uname -r 2.6.32-431.el6....

slurm集群搭建包.zip

08-11

slurm 集群搭建所需的镜像

slurm调度设计文档

12-22

一篇文档让你精通Slurm调度！Slurm调度的考虑点、调度模型、涉及的插件和参数、调度主要流程和关键代码。涉及主调度器/回填调度/网络拓扑/gpu调度/抢占/gang/资源预约/checkpoint等插件细节。

Slurm中集群配置文件之slurm.conf

小男孩儿的博客

01-14

3775

slurm.conf是一个ASCII文件，它描述了一般的Slurm 配置信息、要管理的节点、有关如何将这些节点分组到分区中，以及各种调度与这些分区关联的参数。此文件应为在群集中的所有节点上保持一致。可以通过设置SLURM_CONF在执行时修改文件位置环境变量。Slurm 守护进程还允许您覆盖使用“-f”的内置位置和环境提供的位置选项。文件的内容不区分大小写，但节点名称除外和分区。将处理配置文件中“#”后面的任何文本作为该行末尾的评论。

Slurm如何管理和使用节点资源

h_m_l的博客

10-31

9877

Slurm管理和使用集群节点资源主要分为四个环节：分别是初始化节点资源、更新节点资源、测试节点资源可用、实际分配节点资源。 1.初始化节点资源 slurmctld初始化时解析节点配置文件，借助几个全局数据结构（select插件中也有几个数据结构）： node_record_table_ptr 节点数组，保存所有节点描述符 node_hash...

常用Slurm作业投递及查询命令