centos下运行Gemini（单机&分布式）

最新推荐文章于 2022-10-26 22:04:50 发布
最新推荐文章于 2022-10-26 22:04:50 发布
阅读量1.3k 收藏 1
点赞数 1
分类专栏： Gemini 文章标签： centos gemini
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/envy13/article/details/74547831
版权

centos下运行Gemini（单机&分布式）

单机运行Gemini就直接从GitHub上下载make一下就行，但是速度非常慢；

分布式环境要先装munge，再装slurm，才能执行下面的命令行（srun）

在node16和node18上运行Gemini：

以pagerank算法为例，参数分别为：
节点数 算法所在路径 数据集所在路径 数据集节点数 迭代次数
只用在控制节点上运行以下命令行，计算节点之前通过slurm的配置在运行时自动加入运行。

 srun -N2 ./toolkits/pagerank ./../data_sbb/amazon-2008.bin
最低0.47元/天 解锁文章
吃瓜三道杠
关注
  • 1
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 3
    评论
专栏目录
slurm资源监控_使用SLURM优化超级计算机中的资源管理
cuxiong8996的博客
07-04 2981
与蒂姆联系 蒂姆是我们最受欢迎和最多产的作家之一。 在developerWorks上浏览Tim的所有文章 。 查看Tim的个人资料，并与他，其他作者以及developerWorks社区中的其他开发人员联系 。 超级计算机是军备竞赛的经典例子。 当现代超级计算机的性能不断提高扩展到新的问题领域时，这些庞大的系统为解决新问题提供了平台。 随着公司和国家努力提高LINPACK分数，超级计...
srun: job 577909 queued and waiting for resources
sqlora的专栏
07-07 1220
[g0151:33153] *** An error occurred in MPI_Wait [g0151:33153] *** reported by process [3514040320,2] [g0151:33153] *** on communicator MPI COMMUNICATOR 6 SPLIT FROM 4 [g0151:33153] *** MPI_ERR_TRUNCATE: message truncated [g0151:33153] *** MPI_ERRORS_ARE_FA
Nodes required for job are DOWN, DRAINED or reserved for jobs in higher priority partitions
u010797364的博客
10-13 7362
1.提交作业： # srun hostname srun: Required node not available (down, drained or reserved) srun: job 58 queued and waiting for resources 2.查看作业状态： squeue 58 compute hostname root PD 0:00 1 (Nodes required for job are DOWN, DRAINED or reserve
Reason=Low socket*core*thread count, Low CPUs [slurm@2021-09-15T15:18:53]
u010797364的博客
10-12 1272
提交作业： # srun hostname srun: Required node not available (down, drained or reserved) srun: job 58 queued and waiting for resources 查看作业状态： squeue 58 compute hostname root PD 0:00 1 (Nodes required for job are DOWN, DRAINED or reserved fo
slurm集群部署安装+ansible
最新发布
weixin_43537820的博客
10-26 2037
使用ansible部署安装slurm集群
详解CentOS 6.5搭建Redis3.2.8单机分布式集群
09-09
在本文中，我们将深入探讨如何在CentOS 6.5操作系统上搭建Redis 3.2.8的单机分布式集群。这个过程对于那些希望利用Redis的高性能存储能力并实现数据冗余和高可用性的系统管理员和开发者来说至关重要。Redis是一个...
在CentOS上配置单机版、伪分布式hadoop.doc
06-16
1.SSH无密码登录 （1）SSH相关包检查与安装 在安装有些Linux系统是，如果选择的是基本安装、最小安装，SSH协议是不会安装的。所以在启动SSH协议之前，需要进行ssh和rsync两个服务的检查
centos6.8下hadoop3.1.1完全分布式安装指南(推荐)
09-14
主要介绍了centos6.8下hadoop3.1.1完全分布式安装指南,本文给大家介绍的非常详细，具有一定的参考借鉴价值，需要的朋友可以参考下
srun3000 校园网客户端
09-13
免费上校园 需要校园网支持啊 不行就是学校的问题
slurm安装心得体会,虚拟机中安装，并提交作业，以及队列用户限制
04-17
slum安装心得体会slurm安装心得体会,虚拟机中安装，并提交作业，以及队列用户限制
SLURM 节点状态总是drained问题
热门推荐
kongxx的专栏
09-03 2万+
问题描述新装的 SLURM 集群在运行了一些作业并修改一些配置项目以后，用sinfo查看信息的时候看到部分节点状态总是 drained ，但是在这个节点上并没有作业在运行，重启 slurm 服务问题依旧，如下$ sinfoPARTITION AVAIL TIMELIMIT NODES STATE NODELIST debug* up infinite 1 drain
Slurm如何管理和使用节点资源
h_m_l的博客
10-31 9866
Slurm管理和使用集群节点资源主要分为四个环节：分别是初始化节点资源、更新节点资源、测试节点资源可用、实际分配节点资源。 1.初始化节点资源 slurmctld初始化时解析节点配置文件，借助几个全局数据结构（select插件中也有几个数据结构）： node_record_table_ptr 节点数组，保存所有节点描述符 node_hash...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 3
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值