ubuntu 安装 infiniband 和 RoCE 驱动

于 2024-03-12 16:34:43 发布
阅读量179 收藏
点赞数
分类专栏： Kubernetes 文章标签： ubuntu
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_40548182/article/details/136654214
版权
Kubernetes 专栏收录该内容
89 篇文章 128 订阅 ¥9.90 ¥99.00
订阅专栏

下载驱动程序

驱动程序地址
https://network.nvidia.com/products/infiniband-drivers/linux/mlnx_ofed/
在这里插入图片描述
在这里插入图片描述

安装

安装参考文档
https://docs.nvidia.com/networking/display/mlnxofedv24010331/installing+mlnx_ofed#src-2571322208_InstallingMLNX_OFED-InstallationProcedure

mount -o ro,loop MLNX_OFED_LINUX-24.01-0.3.3.1-ubuntu22.04-x86_64.iso  /mnt

cd /mnt/

./mlnxofedinstall

安装输出

Checking SW Requiremen
了解本专栏 订阅专栏 解锁全文
时空无限
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
订阅专栏
k8s-freeflow:完整的解决方案，以支持RDMA（在InfiniBand和RoCE上）并在Kubernetes上加速TCP到裸机的性能
04-27
k8s-freeflow git clone https://github.com/gangliao/k8s-freeflow git submodule update --init --recursive 待办事项清单 IP Hunter：定期将更改的节点写入并映射（vip，pip）到ETCD中 IP Hunter的Docker映像 尚未通过ETCD的Watch模式的RESTful API定期测试ffrouter更新HOST_LIST和vip_map **。 GoogleTest PASS ：ffrouter ETCD V3 API的监视模式 Watch API提供了一个基于事件的接口，用于异步监视键的更改。 etcd3监视程序通过从给定的修订版本（当前版本或历史版本）连续监视来等待密钥更改，并将密钥更新流回客户端。 GoogleTest PASS ：ffrouter的E
InfiniBand架构和技术实战总结(第二版).pdf
07-10
InfiniBand架构和技术实战总结(第二版).pdf
（免积分）Infiniband Specification Vol 1-Release-1.4
09-23
Infiniband Specification Vol 1-Release-1.4相关资料 （免积分） 内容包含 IB Specification Vol 1-Release-1.4-2020-04-07.pdf IB Specification Vol 2-Release-1.4-2020-04-07.pdf
Infiniband和以太网rdma技术
11-14
主要介绍了在数据中心infiband和以太网等技术的分析以及应用
infiniband linux driver
12-22
infiniband linux driver，从linux 2.6.38的源代码中copy出来的
k8s infiniband 和 RoCE(RDMA over Converged Ethernet)
最新发布
weixin_40548182的博客
03-05 260
vendors 为设备厂商编号,注意这里不是 ibv_devinfo 命令看到的vendor_id 的值，而是 lspci -n |grep “网卡的bdf” 得到的。如上文所述，启动了两个测试 pod ，登录其中一个 pod（该 pod roce 设备 ip 为 10.56.217.79）如上文所述，启动了两个测试 pod ，登录其中一个 pod（该 pod ip 为 10.96.225.24）说明：文中用到的镜像是自定义的，文末有其Dockerfile 文件。修改该文件，增加污点容忍的内容，如下。
ubuntu 20 安装Mellanox ConnectX-3驱动
02-08 3508
官方网址 Ethernet drivers and acceleration software | NVIDIARelease notes for NVIDIA Mellanox Ethernet drivers, acceleration software and tools.https://developer.nvidia.com/networking/ethernet-software 选择对应的驱动下载 第二个包含了RDMA，第一个，第二个都行 网卡是x-3的，选对应的驱动 #查看.
Ubuntu18.04 SoftRoCE安装教程
GGGYL111的博客
07-08 541
目标：创建两台Ubuntu18.04虚拟机，安装SoftRoCE环境，一台作为Server，一台作为Client，模拟RDMA通信环境，熟悉RDMA的通信方式。
Infiniband网卡安装、使用总结
分享观点和经验，欢迎交流。
06-22 4321
最近多次安装、使用infiniband网卡，每次都要到处寻找相关资料，所以决定做此总结，方便查找。 1. 基础知识 首先，得了解什么是RDMA，贴几个资料： 深入浅出全面解析RDMA RDMA技术详解（一）：RDMA概述 RDMA技术详解（二）：RDMA Send Receive操作 然后得了解如何实现，这两个可以有个初步了解： RDMA编程：事件通知机制 RDMA read and write with IB verbs 编程过程，真正有用的还是官方的手册： RDMA Aware Networks P.
ubuntu14.04系统+cx5网卡驱动安装
owlcity123的博客
10-26 1097
场景：华三测试机配置的cx5网卡，装好ubuntu14.04的系统后，发现网卡无法识别 lspci | grep Eth ethtool eth0 #没有此设备 解决方法： 1、在官网下载驱动包，由于网络不通，我下载的为iso镜像进行远程挂载 Linux InfiniBand Drivers 2、在远程桌面挂载网卡iso镜像 3、挂载虚拟硬盘并安装驱动 mount /dev/sr0 /mnt cd /mnt ls ./mlnxofedinstall #由于...
服务器配置IPMI远程访问及排错
weixin_40548182的博客
12-04 6871
这里以dell服务器为例，其他的服务器类似。 可以进BIOS配置，但是BIOS都是英文，不方便查看每个配置项的意思，所以这里用web界面配置。 通过web界面配置 初始准备 开机界面查看IPMI地址，默认为192.168.0.1。 找根网线，一端连服务器的iDRAC口（如下图），一端连到笔记本网口，笔记本网卡IP配置成和IPMI地址同网段的。 浏览器登录 输入IPMI地址，初始账号为root，密码为calvin。 配置IPMI远程 登录后找到iDRAC设置—网络—IPMI设置，勾选启用LAN上的IPMI。
kubeadm搭建k8s及排错（可任意选择版本）
weixin_40548182的博客
08-27 3169
1.1 配置要求 要求最少2核cpu，否则使用kubeadm命令配置时会报错 [ERROR NumCPU]: the number of available CPUs 1 is less than the required 2 1.2 主机名解析 将各个节点的主机名及ip对应关系写入/etc/hosts文件中。 1.3 关闭防火墙和selinux #所有节点都执行 systemctl disable firewalld systemctl stop firewalld setenforce 0 1.4 关闭
k8s 不同node之间pod ip不通
weixin_40548182的博客
06-14 2641
底层k8s使用calico网络，ipip网络模式，kubevirt启动了2台虚拟机；在这两台虚拟机上再搭建k8s，calico网络，ipip网络模式。说明：我是使用helm安装的calico，改这个模式要改crd资源ippools。其他方式安装的calico修改方法可能不一样。在虚拟机上的k8s上启动了2个pod，分布在不同的node上，这两个pod不能ping通对方的pod ip。修改虚拟机之上的k8s集群的calico网络的ipipMode为Never即可，之前使用的是Always。
k8s控制器之deployment
weixin_40548182的博客
01-29 2300
1、环境 1.1 操作系统及其内核版本 [root@master ~]# cat /etc/redhat-release CentOS Linux release 7.5.1804 (Core) [root@master ~]# uname -r 3.10.0-862.el7.x86_64 1.2 k8s版本 [root@master ~]# kubelet --version Kubernetes v1.23.3 [root@master ~]# kubeadm version kubeadm ve
OpenStack-helm部署OpenStack
weixin_40548182的博客
03-10 2274
报错1 ./tools/deployment/component/common/ingress.sh 报错 ...Successfully got an update from the "local" chart repository ...Successfully got an update from the "stable-ali" chart repository ...Successfully got an update from the "stable" chart repository Upda
k8s使用containerd运行时 crictl 命令配置
weixin_40548182的博客
06-09 2256
解决 验证
containerd配置使用私有镜像仓库
weixin_40548182的博客
05-31 1920
该报错是因为containerd里配置了不该配置的内容，我的是因为在 [plugins.“io.containerd.grpc.v1.cri”.registry] 这行下边添加了如下配置。找到 [plugins.“io.containerd.grpc.v1.cri”.registry.mirrors]找到 [plugins.“io.containerd.grpc.v1.cri”.registry.configs]如果仓库没配置https，配置这一项。另外如果遇到类似如下的报错。
kubelet启动报错
weixin_40548182的博客
02-22 1849
注释/etc/containerd/config.toml 文件中disabled_plugins = [“cri”]配置。场景：使用kubeasz部署kubernetes 1.26.0默认采用containerd运行时。重启containerd。启动kubelet失败。
InfiniBand和RoCE到底什么关系
06-03
InfiniBand和RoCE都是用于高性能计算和数据中心网络的技术。InfiniBand是一种标准化的互连技术，提供高带宽、低延迟和高可靠性的数据传输。而RoCE（RDMA over Converged Ethernet）是一种在以太网上实现RDMA（远程直接内存访问）的技术，可以利用现有的以太网基础设施提供类似InfiniBand的性能。因此，可以说RoCE是一种基于以太网的InfiniBand技术实现。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

时空无限

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值