记录：PVE8.2版本设置显卡NVIDIA 4090D直通亲测

最新推荐文章于 2025-05-13 17:02:57 发布
最新推荐文章于 2025-05-13 17:02:57 发布
阅读量9.7k 收藏 68
点赞数 32
文章标签： linux 运维 服务器
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44028652/article/details/143614533
版权

记录PVE8.2版本设置显卡NVIDIA 4090D直通

首页
镜像系统

参考记录：

1、PVE入门-显卡直通
2、PVE8.0版本镜像下载
3、PVE新手安装

实战记录

成功4090D

一、系统下载和安装；

先把对应的PVE系统刻录到U盘，在接入到服务器&工作站设备上（工具很多，自行选择），本次用的是Rufus做系统盘，我的镜像版本是PVE 8.2；刻录完成接到设备上开机选择U盘启动；
在这里插入图片描述
安装
读条
1

选择同意
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
安装完成之后可以看到对应的登录界面以及对应的IP，记得之前添加的ip地址，这个是用于登录web管理端口的；
例如我设置的192.168.0.114，在同网段内系统登录就可以通过此IP去访问到设备；
web端：https://192.168.0.114:8006 (8006是PVE的默认端口号)
用户名：root（默认），密码是设置的password密码；

二、直通显卡配置

1、配置开启IOMMU支持 vi /etc/default/grub（每个参考的都不一样，这个需要注意，）
#Intel处理器:
GRUB_CMDLINE_LINUX_DEFAULT="quiet intel_iommu=on iommu=pt initcall_blacklist=sysfb_init initcall_blacklist=sysfb_init pcie_acs_override=downstream,multifunction pci=nommconf video=efifb:off"

#AMD处理器：
GRUB_CMDLINE_LINUX_DEFAULT="quiet amd_iommu=on iommu=pt initcall_blacklist=sysfb_init initcall_blacklist=sysfb_init pcie_acs_override=downstream,multifunction pci=nommconf video=efifb:off"
  1. intel_iommu 和 amd_iommu=on 为开启IOMMU
  2. video=vesafb:off video=efifb:off 不加载 vesafb 是 veas设备 的 fb ，efifb 是指 uefi设备 的 fb ，在 PVE 7.3 之后版本用（测试了关闭的情况下有可能报错）
  3. initcall_blacklist=sysfb_init 替代（来源于PVE 7.3 优化和显卡直通）
    pcie_acs_override=downstream 是为了将 iommu groups拆分，方便直通一些板载的设备（来源于加强硬件直通的功能）
GRUB_DEFAULT=0
GRUB_TIMEOUT=5
GRUB_DISTRIBUTOR=`lsb_release -i -s 2> /dev/null || echo Debian`
GRUB_CMDLINE_LINUX_DEFAULT="quiet intel_iommu=on iommu=pt initcall_blacklist=sysfb_init initcall_blacklist=sysfb_init pcie_acs_override=downstream,multifunction pci=nommconf"
GRUB_CMDLINE_LINUX=""
##这个是个人本地的设置
2、更新 GRUB proxmox-boot-tool refresh 执行更新（不使用 update-grub 原因是，它提示的，个人觉得都可以使用，我用的是update-grub）；
update-grub #重启内核服务
reboot      #重启设备
3、验证iommu是否生效dmesg | grep -e IOMMU
root@tlzx:~# dmesg | grep -e IOMMU
[    0.000000] Warning: PCIe ACS overrides enabled; This may allow non-IOMMU protected peer-to-peer DMA
[    0.324109] DMAR: IOMMU enabled
[    0.909875] DMAR-IR: IOAPIC id 12 under DRHD base  0xfbffc000 IOMMU 2
[    0.909877] DMAR-IR: IOAPIC id 11 under DRHD base  0xb33fc000 IOMMU 1
[    0.909879] DMAR-IR: IOAPIC id 10 under DRHD base  0x94bfc000 IOMMU 0
[    0.909881] DMAR-IR: IOAPIC id 8 under DRHD base  0x947fc000 IOMMU 3
[    0.909882] DMAR-IR: IOAPIC id 9 under DRHD base  0x947fc000 IOMMU 3
[    1.665623] DMAR: IOMMU feature coherent inconsistent
[    1.665624] DMAR: IOMMU feature coherent inconsistent
4、添加所需的系统模块（驱动）
##参照
echo "vfio" >> /etc/modules
echo "vfio_iommu_type1" >> /etc/modules
echo "vfio_pci" >> /etc/modules
echo "vfio_virqfd" >> /etc/modules
update-initramfs -u -k all ##更加内核
## 查看个人的
root@tlzx:~# cat /etc/modules
# /etc/modules: kernel modules to load at boot time.
#
# This file contains the names of kernel modules that should be loaded
# at boot time, one per line. Lines beginning with "#" are ignored.
# Parameters can be specified after the module name.

vfio
vfio_iommu_type1
vfio_pci
vfio_virqfd
root@tlzx:~#
5、添加模块（驱动）黑名单 N卡（我的是4090 D）
echo "blacklist nvidia" >> /etc/modprobe.d/pve-blacklist.conf
echo "blacklist nvidiafb" >> /etc/modprobe.d/pve-blacklist.conf
echo "blacklist nouveau" >> /etc/modprobe.d/pve-blacklist.conf
echo "options kvm ignore_msrs=1" > /etc/modprobe.d/kvm.conf
6、查看显卡并把显卡添加到配置文件（有些不需要，但是为避免有问题也添加了）
root@tlzx:/etc/modprobe.d# lspci -nn | grep NV
17:00.0 Non-Volatile memory controller [0108]: Samsung Electronics Co Ltd NVMe SSD Controller PM9A1/PM9A3/980PRO [144d:a80a]
65:00.0 VGA compatible controller [0300]: NVIDIA Corporation AD102 [GeForce RTX 4090 D] [10de:2685] (rev a1)
65:00.1 Audio device [0403]: NVIDIA Corporation AD102 High Definition Audio Controller [10de:22ba] (rev a1)
b3:00.0 VGA compatible controller [0300]: NVIDIA Corporation AD102 [GeForce RTX 4090] [10de:2684] (rev a1)
b3:00.1 Audio device [0403]: NVIDIA Corporation AD102 High Definition Audio Controller [10de:22ba] (rev a1)
root@tlzx:/etc/modprobe.d#  lspci -n -s 65:00.0   ##这个对应的是4090 D的
65:00.0 0300: 10de:2685 (rev a1)
root@tlzx:/etc/modprobe.d#

设置完成的目录文件cd /etc/modprobe.d目录下

root@tlzx:/etc/modprobe.d# ls ##查看当前目录文件
kvm.conf  pve-blacklist.conf  vfio.conf
root@tlzx:/etc/modprobe.d# cat kvm.conf 
options kvm ignore_msrs=1
root@tlzx:/etc/modprobe.d# cat pve-blacklist.conf 
# This file contains a list of modules which are not supported by Proxmox VE 

# nvidiafb see bugreport https://bugzilla.proxmox.com/show_bug.cgi?id=701
blacklist nvidiafb
blacklist nvidia
blacklist nouveau
root@tlzx:/etc/modprobe.d# cat vfio.conf 
options vfio-pci ids=10de:2685
options vfio-pci ids=10de:2684
root@tlzx:/etc/modprobe.d#

配置完成记得重启内核和设备:

update-initramfs -u
reboot

三、登录web端添加虚拟机

通过之前配置的IP登录到PVE的web管理，在web管理上登录之后可以看到以下界面；地址：https://ip:8006
在这里插入图片描述

1、创建虚拟机前先上传对应的虚拟机镜像；linux直接添加镜像，需要注意的！！！windows需要上传2个，1个是windows的镜像，另一个是驱动的镜像文件；

linux镜像下载：清华源的
清华源Ubuntu的镜像
阿里云的Ubuntu镜像
Windows的镜像：MSDN的（有其他的方便的可以共享下，谢谢）
本人百度云的，含Windows驱动
PVE官网的Windows 驱动
官网地址：https://pve.proxmox.com/wiki/Windows_VirtIO_Drivers在这里插入图片描述
镜像上传界面：

在这里插入图片描述
在这里插入图片描述

2、虚拟机创建

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

虚拟机创建完成就开始安装系统了，省略。。。。。。。

四、问题汇总

1、pve换源：参考pve换源

实际应用：

root@tlzx:/etc/apt# ls
apt.conf.d  auth.conf.d  keyrings  listchanges.conf  listchanges.conf.d  preferences.d	sources.list  sources.list.bak	sources.list.d	trusted.gpg.d
root@tlzx:/etc/apt# cat sources.list
deb http://mirrors.aliyun.com/debian bookworm main contrib
deb http://mirrors.aliyun.com/debian bookworm-updates main contrib
# security updates
deb http://mirrors.aliyun.com/debian-security bookworm-security main contrib
deb http://download.proxmox.com/debian/pve bullseye pve-no-subscription
root@tlzx:/etc/apt# cat sources.list.
sources.list.bak  sources.list.d/   
root@tlzx:/etc/apt# cat sources.list.d/
ceph.list                 pve-enterprise.list       pve-no-subscription.list  
root@tlzx:/etc/apt# cat sources.list.d/pve-enterprise.list 
#deb https://enterprise.proxmox.com/debian/pve bullseye pve-enterprise
root@tlzx:/etc/apt# cat sources.list.d/pve-no-subscription.list 
deb https://mirrors.ustc.edu.cn/proxmox/debian/pve bullseye pve-no-subscription
root@tlzx:/etc/apt# cat sources.list.d/ceph.list 
deb https://enterprise.proxmox.com/debian/ceph-reef bookworm enterprise
root@tlzx:/etc/apt#
2、网络NAT配置，参考文献Proxmox VE同时配置NAT共享IP和独立IP虚拟机

在网络中添加虚拟网口；
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

配置完成，记得应用生效！！然后查看宿主机配置文件。
在这里插入图片描述
然后在配置文件中通过映射把，vmbr1的流量通过vmbr0出去，配置如下：

			post-up echo 1 > /proc/sys/net/ipv4/ip_forward
            post-up bash /root/iptables.config.sh
            post-up iptables -t nat -A POSTROUTING -s '192.168.1.0/24' -o vmbr0 -j MASQUERADE
            post-down iptables -t nat -D POSTROUTING -s '192.168.1.0/24' -o vmbr0 -j MASQUERADE

配置完成，虚拟机需要手动添加IP地址才可以访问；
实际效果：
在这里插入图片描述
在这里插入图片描述
设备正常联网；

【PVE】PVE虚拟机使用显卡直通
Hi-Jimmy
01-23 5567
虚拟机显卡直通是一种虚拟化技术，允许将物理主机中的GPU直接分配给虚拟机使用。这使虚拟机可以利用物理显卡的计算和渲染能力，从而实现接近于原生硬件性能的体验。显卡直通技术通常用于需要高性能图形处理或GPU加速的场景，例如图形密集型应用、、视频编辑、、科学计算和游戏等。
PVE设置显卡直通（二：Linux显卡直通，以及Linux系统下安装cuda库）
王三三
03-31 2665
本文仅记录PVE关于Linux下的显卡直通步骤 例程不过多阐述 ps: 无直通经验的同学，先参阅 PVE设置显卡直通（一：硬件设置），再参阅本博文 仅希望了解Linux系统下安装cuda库的同学可以直接参考本博文
PVE 配置显卡直通
SimonRiley的CSDN博客
02-27 1851
如果出于特殊需求或环境导致无法关闭，需注册 DKMS 密钥，注册流程比较复杂且涉及 EFI 分区改动，本文不作详解。用于拆分 iommu groups，防止分组错误时直通一个板载端口导致整个设备被直通。命令用于更新 GRUB，但有可能无法正常更新，此时请根据情况尝试。添加以下内容用于屏蔽对应 GPU 平台驱动，防止主机驱动 GPU。开启 X2APIC 后仍无法启用中断重映射，尝试在。用于将指定设备绑定到 VFIO 框架，由。驱动，以便用户态进程可以直接访问这些设备。找到显卡设备，应为类似如下内容。
Proxmox8安装飞牛OS并实现硬盘直通（PVE8安装飞牛OS并硬盘直通）
weixin_42431643的博客
04-21 1847
Proxmox8安装飞牛OS并实现硬盘直通（PVE8安装飞牛OS并硬盘直通）
Proxmox VE 8.4.0显卡直通完整指南：NVIDIA Tesla T4 实战
最新发布
Chiron技术栈
05-13 1041
IOMMU（Input-Output Memory Management Unit）是硬件辅助的虚拟化技术，为PCI设备直通提供必要的内存管理和隔离功能。目前我已在服务器完成了proxmox4.4.0的安装，并且安装了带有NVIDIA Tesla T4的显卡。PCIe Passthrough 技术允许虚拟机直接访问物理GPU设备，绕过宿主机系统，从而获得接近原生性能的图形处理能力。这里使用了登录web控制台增加pci设备的方式，当然也可以shell登录宿主机使用命令添加的方式！防止宿主机占用显卡帧缓冲区。
PVE纵览-解锁 PVE 的潜力：配置显卡直通
DreamLife
02-04 1155
显卡直通（GPU Passthrough）是一种虚拟化技术，允许虚拟机直接访问主机的物理显卡资源。这意味着虚拟机可以利用显卡的全部性能，而不是依赖于虚拟化平台提供的虚拟显卡。这种技术通常用于需要高性能图形处理能力的应用场景，如图形设计、视频编辑、3D 渲染和游戏等。
PVE开启核显直通
我的世界没光的博客
08-30 5774
的参数建议添加，以提高未直通设备 PCIe 的性能，PT 模式只在必要的时候开启设备的 IOMMU 转换。接着添加模块（驱动）黑名单,即让GPU设备在下次系统启动之后不使用这些驱动,把设备腾出来给vfio驱动用;，禁用GPU驱动，以便vfio使用。编辑内核模块加载文件。
pve 8.2 直通核显 支持内核 6.5 至 6.8的版本
Jon_c的博客
09-20 5019
克隆此存储库安装所需版本的内核和头文件：（适用于未签名的内核）。切换到克隆存储库的根目录，然后运行。dkms add .执行命令， 编译安装 i915-sriov-dkms如果失败了可以先运行以下命令，然后回到二、SRIOV核显虚拟化重新开始编译一次输入以下命令检查是否成功编辑 grub 配置文件在GRUB_CMDLINE_LINUX_DEFAULT=“quiet” 后添加保存退出更新grub和initramfs安装sysfsutils（对新手友好方便对VF核显数量设置）
PVE 配置显卡直通，打造本地大模型地基
Y525698136的博客
11-13 8040
本文将详细介绍如何在虚拟化平台 Proxmox Virtual Environment（PVE）配置显卡直通，将宿主机上的物理显卡直接分配给 AI 虚拟机使用。
【机器视觉】-什么是机器视觉？
AAI666666的博客
01-06 573
机器视觉就是使用光学非接触感应设备自动接收并解释真实场景的图像以获得信息控制机器或流程。
PVE配置GPU显卡直通(亲测可用)
热门推荐
yyhyoung的博客
05-16 5万+
其中一行是GRUB_CMDLINE_LINUX_DEFAULT="quiet“，修改这一行为如下内容，保存并退出。配置虚拟机内存，物理为32GB，这里给分配了24X1024MB的内存容量。然后勾选所有功能、ROM-Bar、PCI-Express复选框，点击添加。配置CPU核心数，按照自己物理机的CPU进行分配。在PCI设备中找到自己的GPU设备型号。4.进入命令行模式 shell。用以下内容替换原代码并保存退出。使用以下命令打开要修改的文件。添加后在虚拟机的硬件中添加。保存并退出，输入以下命令。
PVE下J4125 核显直通所需的vgabios romfile
11-15
PVE下J4125 核显直通所需的vgabios，windows10下实现HDMI直通接显示器显示成功。 上传到PVE的root目录，Windows虚拟机配置文件加一行： args: -device vfio-pci,host=00:02.0,addr=0x02,x-igd-gms=1,romfile=/root/igpu.bin 如果你的显卡设备ID为8086:3185，可以直接使用此bin，如果不一样，需要自己转一下ID。 Windows10虚拟机设置seabios,q35，不要直接直通显卡，要在虚拟机配置文件用上面命令行加。驱动用26.20.100.7262_A06版。
Proxmox VE 8.2-1 ISO 官方镜像(分包1)
06-17
Proxmox VE 8.2-1 ISO 官方镜像 Proxmox VE是一个既可以运行虚拟机也可以运行容器的虚拟化平台。Proxmox VE基于Debian Linux开发，并且完全开源。出于灵活性的考虑，Proxmox VE同时支持两种虚拟化技术：KVM虚拟机和...
映泰J4105nhu PVE显卡直通 HDMI直出
03-18
映泰J4105nhu PVE显卡直通romfile，HDMI可直出，亲测可用。 PVE显卡直通的方法网上已有大量文章，此处不再赘述。 下载本文附件，把文件拷贝到PVE的/root/下面。 进入etc/pve/qemu-server，这是一个link文件。 找到...
PVE8.2管理员手册：虚拟机和容器平台管理指南
07-15
Proxmox VE是一个运行虚拟机和容器的平台，基于Debian Linux，完全开源。为了最大限度的灵活性，我们实现了两种虚拟化技术—基于内核的虚拟机（KVM）和基于容器的虚拟化（LXC）。Proxmox VE管理员手册8.2.2版是...
pve 8 直通 pcie 设备 VM 虚拟机_pve 8 硬盘直通
2401_84969642的博客
05-17 2103
由于直通是在真实硬件上执行的，因此需要满足一些 要求。下面简要概述了这些要求。硬件需要支持 IOMMU （I/O Memory Management Unit） 中断重新映射，这包括 CPU 和主板。通常，具有 VT-d 的 Intel 系统和带有 AMD-Vi 的 AMD 系统都支持此功能。但不能保证一切都会开箱即用，因为 硬件实现不良以及驱动程序缺失或质量低下。此外，服务器级硬件通常比消费级硬件具有更好的支持 硬件，但即便如此，许多现代系统也可以支持这一点。
Proxmox VE 8.4 显卡直通完整指南：NVIDIA 2080 Ti 实战
saynaihe的博客
05-02 927
在R740服务器完成了proxmox的安装，并且安装了一张2080ti 魔改22g显存的的显卡。现在我需要将显卡直接直通到一台vm实例上面。验证系统信息****输出确认当前proxmox server 是基于debian 12 版本的 8.4.0 proxmox操作系统 ：下面就就详细记录一下具体过程！请注意：当前服务器cpu为intel处理器，amd处理器配置有些许不同，请注意查找一下相关资料…
PVE8直通核显（N100），并开启虚拟化Sriov
Abin17618的博客
01-03 3万+
PVE8直通N100核显，并开启虚拟化Sriov，实现一个显卡直通给多个虚拟机
PVE GPU Pass Through（pve显卡直通）
m0_59148723的博客
05-29 1万+
显卡直通原理： 最底层：打开主机Bios下的最底层直通开关VT-D； PVE系统层：打开PVE系统的IOMMU支持，大概意思是PVE系统级别的开关； PVE系统层：关闭PVE系统对显卡的调用，腾出来给虚拟机用； 虚拟机层：配置要用显卡的虚拟机，让他去调用显卡； 虚拟系统层：让Windows系统装上显卡的驱动，让虚拟机系统能调用下卡；
scrapy案例下载
09-14
Scrapy是一个强大的Python爬虫框架，可以用来从网站上提取结构化数据。以下是一个简单的Scrapy案例下载的流程： 步骤1：安装Scrapy框架 首先，需要安装Scrapy框架。可以使用pip命令来安装，如下所示： pip install scrapy 步骤2：创建一个Scrapy项目 在终端中，使用scrapy命令来创建一个新的Scrapy项目，例如： scrapy startproject myproject 步骤3：定义爬虫 在项目的目录中，找到spiders文件夹，在该文件夹下创建一个新的Python文件来定义一个爬虫。可以通过继承scrapy.Spider类，并实现必要的方法来定义爬虫的行为。 步骤4：配置爬虫 在项目的目录中，找到settings.py文件，并进行必要的配置，例如设置User-Agent、允许/禁止的域名等。 步骤5：编写数据保存 根据实际需求，需要编写代码来把爬取到的数据保存到本地文件或数据库中。 步骤6：运行爬虫 在终端中，使用scrapy crawl命令来启动爬虫，并指定爬虫的名称，例如： scrapy crawl myspider 步骤7：获取数据 当爬虫运行完毕后，爬取到的数据会自动保存到指定的位置。根据之前的数据保存配置，可以在输出目录或数据库中找到数据。 以上是一个简单的Scrapy案例下载的流程，根据实际需求，可以对其中的每一步进行详细的配置和定制。Scrapy框架的强大和灵活性能够满足各种不同的爬虫需求。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值