Nvidia BF3 DPU安装

Cherries Man

已于 2024-05-15 12:57:45 修改

阅读量3k

点赞数 6

分类专栏：高性能计算计算机网络文章标签： DPU BF3 Nvidia

于 2024-04-25 13:21:57 首次发布

本文链接：https://blog.csdn.net/myf_666/article/details/137933910

版权

高性能计算同时被 2 个专栏收录

5 篇文章

订阅专栏

计算机网络

2 篇文章

订阅专栏

本文详细描述了如何在Ubuntu18.04系统上安装、卸载NVIDIADPU相关驱动，配置Host和DPU环境，包括使用DOCA、OFED、Mellanox工具，以及在DPU上部署BFBUbuntu镜像的步骤。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

参考链接：https://docs.nvidia.com/doca/archive/doca-v2-5-0/nvidia+doca+developer+quick+start+guide/index.html

安装DPU硬件

参考链接：https://docs.nvidia.com/networking/display/bluefield2dpuenug/hardware+installation

断电、插网卡

卸载之前的驱动

后续卸载之前驱动、配置Host环境、配置DPU环境等，均按照下方参考链接来配置，其中的版本好、.deb文件的选择，也都是根据系统，按照其中的表格来进行选择的。

需要注意的是，因为安装的ubuntu系统为18.04，所以与其相匹配的最大doca环境是2.5，因此没有选择最新的doca2.6进行配置

参考链接：https://docs.nvidia.com/doca/archive/doca-v2-5-0/nvidia+doca+installation+guide+for+linux/index.html#src-2448907425_NVIDIADOCAInstallationGuideforLinux-BuildingYourOwnBFBInstallationImage

for f in $( dpkg --list | grep doca | awk '{print $2}' ); do echo $f ; apt remove --purge $f -y ; done

ofed_uninstall.sh --force

sudo apt-get autoremove

wget http://www.mellanox.com/downloads/ofed/RPM-GPG-KEY-Mellanox-SHA256

sudo apt install rpm

sudo rpm --import RPM-GPG-KEY-Mellanox-SHA256

rpm -q gpg-pubkey --qf '%{NAME}-%{VERSION}-%{RELEASE}\t%{SUMMARY}\n' | grep Mellanox

在Host上安装DOCA

找到系统版本所对应的DOCA安装文件（我的是ubuntu18.04版本的OS）：

在这里插入图片描述

解压缩：

sudo dpkg -i doca-host-repo-ubuntu1804_2.5.0-0.0.1.2.5.0108.1.23.10.1.1.9.0_amd64.deb

在这里插入图片描述
更新镜像：

sudo apt-get update

安装doca-tools：

sudo apt install doca-tools

通过下面命令启动mst，并获取DPU的device id：

mst start

mst status -v

在这里插入图片描述

/dev/mst/mt41692_pciconf0.1 就是device id。

安装：

sudo apt install -y doca-runtime doca-sdk doca-tools

在这里插入图片描述

sudo mlxconfig -d /dev/mst/mt41692_pciconf0.1 -y reset

sudo mlxconfig -d /dev/mst/mt41692_pciconf0.1 -e q | grep -i link_type

在这里插入图片描述
Verify that RShim is active

sudo systemctl status rshim

在这里插入图片描述

sudo apt install -y doca-ofed

sudo mst start

sudo mlxconfig -d /dev/mst/mt41692_pciconf0.1 -y reset

Assign a dynamic IP to tmfifo_net0 interface (RShim host interface).

ifconfig tmfifo_net0 192.168.100.1 netmask 255.255.255.252 up

在DPU上安装bfb ubuntu镜像

安装pv

sudo apt-get install pv

按照如下命令生成DPU上的OS的密码的哈希，bfb文件：

在这里插入图片描述

sudo bfb-install --rshim rshim0 --bfb DOCA_2.5.0_BSP_4.5.0_Ubuntu_22.04-1.23-10.prod.bfb --config bf.cfg

验证：

ls -la /dev/ | grep rshim

连接DPU：

ssh ubuntu@192.168.100.2

然后输入密码******

查看DPU上OS版本信息：

cat /proc/version

DPU侧安装：

root@server11:/home/sdn/YFman/BF3/deb# sudo scp -r doca-dpu-repo-ubuntu2204-local_2.5.0107-1.23.10.1.2.0.0.bf.4.5.0.12993_arm64.deb ubuntu@192.168.100.2:/tmp/