openmpi 2.1.1 多网卡运行实例

最新推荐文章于 2023-08-09 17:57:04 发布
最新推荐文章于 2023-08-09 17:57:04 发布
阅读量1.5k 收藏 3
点赞数
文章标签： 网卡 mpi
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u014234504/article/details/78469792
版权

环境:  Centos 7.4   openMPI 2.1.1

在服务器上安装了 Mellanox , Emulex , Intel Broadcom 三种网卡

运行 mpirun --host slave1,slave2 -np 2 /usr/mpi/gcc/openmpi-2.1.2a1/tests/imb/IMB-MPI1

程序一直报错,  原因 ＯｐｅｎＭＰＩ 默认情况下　选择 Infiniband ，　找到 mlx5_1 设备后不能使用正确的VLAN 地址。　


解决方法１）　把mlx5_1 设备排除在设备使用列表中

mpirun --mca btl tcp --mca btl_tcp_if_exclude mlx5_1 --host slave2,slave8 -np 2 /usr/mpi/gcc/openmpi-2.1.2a1/tests/imb/IMB-MPI1



lihui是猪
关注
  • 0
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
OpenMPI源码剖析：网络通信原理（一）
alcc34716的博客
04-09 710
MPI中的网络通信的原理，需要解决以下几个问题: 1. MPI使用什么网络协议进行通信？ 2.中央数据库是存储在哪一台机器上？ 3.集群中如果有一台机器挂掉了是否会影响其他机器？ 参考:https://aosabook.org/en/openmpi.html 根据MCA， 每个框架下的模块是可变的，例如， btl （字节传输层）框架下有N多个网络协议模块: 既然是...
深度学习单机多卡GPU 用mpirun跑分布式训练，2卡不报错正常运行，但是4卡GPU或8卡GPU报错无法解决
最新发布
weixin_45666880的博客
09-08 487
***************************************************解答*****************************************************从你的截图里只知道你在第三张卡（rank2）上的程序被killed了，signal 9 是linux scheduler杀死进程而非进程自己退出（用2GPU可以跑，但是4GPU或8GPU会报下面的错误。上图分别是报错提示和运行训练的指令。你的程序内的错误信息被隐藏了。
OpenMPI源码剖析：网络通信原理(二) 如何选择网络协议?
alcc34716的博客
04-10 403
因为比较常用的是 TCP 协议，所以在 opal/mca/btl/tcp/btl_tcp.h 头文件中找到对应的 struct mca_btl_tcp_component_t { mca_btl_base_component_3_0_0_t super; /**< base BTL component */ uint32_t tcp_addr_coun...
openmpi 2.1.1 RoCE 支持
lihui的服务器技术博客
11-08 2436
环境:  OpenMPI 2.1.1. 网卡Mellanox ConnectX-4Lx  OFED Mellanox_OFED 4.2 OS：　Centos7.3 在服务器上有 Mellnaox, Qulogic, Broadcom 三种网卡，　OpenMPI 运行在RDMA 时需要指定　mca 参数来避免使用了错误的网卡 命令：　 mpirun --hostfile hos
OpenMPI的安装与运行分布式项目
ystraw - Come on！！！
11-07 2905
MPI多节点执行：HYDU_sock_connect (utils/sock/sock.c:145): unable to connect from x to y (No route to host)， 注意下面的格式时OpenMPI的要求。只此，所有机器实现了免密登入，测试如下。如果报相关防火墙错误，可以将其关闭。在运行的程序里面，新建如下文件。然后复制到各个机器相同的位置。基于master机器构建文件。以下全在master上执行。以下全在master上执行。
ubuntu openmpi下载
12-04
Ubuntu作为流行的Linux发行版，是OpenMPI的理想运行环境。下面将详细介绍在Ubuntu上下载和安装OpenMPI的过程。 1. **了解OpenMPI** OpenMPI是由多个机构合作开发的，旨在提供一个高效、灵活且可移植的MPI实现。它...
openmpi分布式实验.docx
10-28
OpenMPI 是一个开源的并行计算框架，它支持分布式内存多处理（MPI）编程模型。本实验旨在通过实际操作让学习者掌握 OpenMPI 的安装、配置以及基本的并行编程技巧。实验环境选择了 Ubuntu 操作系统，这是一款广泛应用...
docker.openmpi:Docker的可扩展OpenMPI运行时容器
05-19
docker.openmpi 特拉维斯CI： 使用此存储库中的代码，您可以构建一个Docker容器，该容器提供OpenMPI运行时和工具以及各种支持的库，包括MPI4Py Python绑定。 该容器还运行一个OpenSSH服务器，以便可以将多个容器链接...
OpenMPI-高性能消息传递库
07-23
官网被墙，无法下载。 OpenMPI 是一种高性能消息传递库，最初是作为融合...OpenMPI提供给系统和软件供应商、程序开发者和研究人员很多便利。易于使用，并运行本身在各种各样的操作系统，网络互连，以及一批/调度系统。
openmpi1.6.5安装指导
09-26
OpenMPI 是一种广泛应用于高性能计算领域的消息传递接口（Message Passing Interface，MPI），它能够将多个处理器核心组合起来，进行大规模并行计算。OpenMPI 的安装过程相对简单，但需要具备一定的依赖库和开发环境...
InfiniBand资源大全
07-10
InfiniBand资源大全
IB(InfiniBand网卡性能测试结果)
05-15
InfiniBand网卡的性能测试结果,可以得到当前最快的InfiniBand网卡的性能指标。
slurm集群安装部署
墨花的博客
08-09 3913
slurm集群部署，应用于超算，包括配置SSH免密登录,NFS共享文件,NIS用户管理,Openmpi并行运算，以及简单的module环境搭建
OpenMPI, LSF, InfiniBand, Mellanox OFED and Intel MPI Benchmark: what is going on ?
wjcaiyf的专栏
04-02 3675
I usually use the Intel MPI Benchmark  (IMB) as a quick test to check everything is ok from a network point of view (connectivity and performance)   My test  cluster for today:   OpenMPI
OpenMPI 源码学习
苦逼Sure的水逼生涯
06-27 3960
参考：关于OpenMPI的代码阅读指导太难找了，直接读真的是有些力不从心，后来发现官网就有，不过版本有点旧，但是不影响。 可先参考这个，http://www.aosabook.org/en/openmpi.html 博客的内容主要参考：https://www.open-mpi.org/video/?category=internals#Cisco_JeffSquyres ...
OpenMPI 学习笔记（五）通信模式
anyin8332的博客
04-20 362
内容概要 Fonctions 功能 Communications bloquantes 阻塞式沟通 Envoi bloquant, mode bu????fferisé •阻塞发送，缓存模式 Envoi bloquant, mode synchrone•阻塞发送，同步模式 Envoi bloquant, mode ready•阻塞发送，准备模式 Env...
计图MPI分布式多卡
吴建明wujianming_110117
02-10 801
计图MPI分布式多卡 计图分布式基于MPI（Message Passing Interface），主要阐述使用计图MPI，进行多卡和分布式训练。目前计图分布式处于测试阶段。 计图MPI安装 计图依赖OpenMPI，用户可以使用如下命令安装OpenMPI： sudo apt install openmpi-bin openmpi-common libopenmpi-dev 计图会自动检测环境变量中是否包含mpicc，如果计图成功的检测到了mpicc，输出如下信息： [i 0502 14:09:55.75848
mpi并行 写同一文件_大数据处理 | 五分钟上手MPI多机并行计算实验
weixin_39532352的博客
11-25 1178
MPI是一种可以用于并行计算的工具，借助它你可以实现比较基础的并行计算。现在就让我们快速地上手这一工具。这篇文章会告诉你什么安装MPI编写并编译含MPI功能的C代码vmware虚拟机之间的免密通信多机的MPI并行计算这篇文章不会告诉你什么安装Ubuntu命令行的使用NFS挂载（文件将通过scp传输）MPI的详尽语法和接口使用MPI首先，用以下命令在你的电脑上安装MPI：sudo apt insta...
如何运行OpenMPI安装包
05-23
运行OpenMPI的安装包需要以下步骤： 1. 下载OpenMPI的安装包，可以从官网 https://www.open-mpi.org/software/ompi/v4.1/ 下载。 2. 解压安装包。可以使用命令 `tar -zxvf openmpi-x.y.z.tar.gz` 进行解压，其中x....
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值