PVE动态核显直通

已于 2024-09-09 15:21:38 修改
阅读量923 收藏 7
点赞数 13
分类专栏： AIO 文章标签： pve Jellyfin 核显直通
于 2024-09-09 15:08:57 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/tzconn/article/details/142059054
版权

动态核显直通

  • 环境介绍:我使用的是搭载Intel 12100 CPU、搭载UHD 730核显，底层运行的是内核6.5.11的8.2.4版本PVE 。文件管理由群晖（Synology）负责，而媒体服务器则由LXC容器中的Jellyfin担任，它利用核显进行硬解。系统上还运行着Windows 10、Home Assistant（HA）、OpenWRT（OP）和Ubuntu等。此外，我尝试了新推出的FNOS,简单测试下来发现还不错打算给到更多的虚拟机资源。

  • 需求分析:SRIOV技术原本是为了实现一卡多用，即允许单个物理显卡被多个虚拟机共享使用。然而，实际测试后发现，尽管SRIOV能够实现核显的虚拟化与拆分实现一卡多用，但性能拉垮，因此我决定不采用这一方案。我需要在启用FNOS时，将核显动态分配给FNOS使用，而在FNOS关闭后，核显应自动返回至宿主机，以便LXC中的Jellyfin继续使用核显进行硬件解码。为了解决这一问题，我考虑使用钩子脚本，以实现核显的动态直通。

  • 实现目标:我的目标是实现核显的灵活分配。首先，确保在PVE环境中，LXC容器中的Jellyfin能够调用核显进行硬解。其次，当启动FNOS时，核显应自动直通给FNOS使用。FNOS关闭后，核显应自动返回至宿主机，以便Jellyfin继续使用。

  • 步骤解释:这里我们分两步,第一步自然是在虚拟机开机时把核显直通给虚拟机。第二步则是虚拟机关机时把核显返回给宿主机。

核显直通

启用内核 IOMMU 支持
  1. 编辑naon /etc/default/grub,内容如下,如果之前添加过video=efifb:off,vesafb:off则应该删除,因为我们需要保留PVE宿主机的显示
GRUB_CMDLINE_LINUX_DEFAULT="quiet intel_iommu=on"
参数释义
intel_iommu=on用 intel_iommu 来驱动 IOMMU 硬件单元
efifb:off禁用efi启动的显示设备
vesafb:off禁用legacy启动的显示设备
  1. 保存并更新 GRUB 配置
    update-grub
检查并移除模块黑名单

如果你之前没有做过核显直通或者此文件里面为空可以不用管。如果有以下内容请移除模块（驱动）黑名单,即让GPU设备在下次PVE启动后允许使用这些驱动;

编辑 /etc/modprobe.d/pve-blacklist.conf，删除如下内容。

blacklist i915
blacklist snd_hda_intel
blacklist snd_hda_codec_hdmi
options vfio_iommu_type1 allow_unsafe_interrupts=1
参数释义
blacklist i915屏蔽显卡驱动
blacklist snd_hda_intel屏蔽板载音频设备
blacklist snd_hda_codec_hdmi屏蔽hdmi音频设备
options vfio_iommu_type1 allow_unsafe_interrupts=1允许不安全的设备中断
加载内核模块

编辑内核模块加载文件/etc/modules,追加以下内容

vfio
vfio_iommu_type1
vfio_pci
vfio_virqfd
检查vfio文件
  1. 如果之前核显直通将核显和声卡添加到vfio文件,此时请删除文件。

rm /etc/modprobe.d/vfio.conf

更新
  1. 更新内核
    update-initramfs -u -k all
  2. 更新设备id
    update-pciids
  3. 重启
    reboot
  4. pve中虚拟机添加PCI设备
  5. 检查核显是否直通过去了

核显返回

完成核显直通后我们可以通过PVE强大的钩子脚本来实现虚拟机关机后直通设备返回PVE宿主机。

下载脚本

以下项目代码来源于hellozhing大佬,克隆相关代码仓库到/root目录，gitee和github二选一。也可以下载完成后上传到root目录下。附上大佬原文地址:PVE虚拟机核显直通及返回钩子脚本
git clone https://gitee.com/hellozhing/pvevm-hooks.git
git clone https://github.com/HelloZhing/pvevm-hooks.git

脚本解释
名称释义
hooks-igpupt.pl根据PVE钩子脚本模板修改而来,主要内容为启动VM时调用vm-start.sh脚本,关闭虚拟机时调用vm-stop.sh脚本
vfio-startup.shPVE安装图形界面后需要用到,实现开启虚拟机PVE图形界面切换到虚拟机画面。只是动态核显直通可以删除,若需要使用需要去vm-start.sh中将#$(dirname $0)/vfio-startup.sh注释放开
vfio-teardown.shPVE安装图形界面后需要用到,实现关闭虚拟机画面切换到PVE图形界面。只是动态核显直通可以删除,若需要使用需要去vm-stop.sh中将#$(dirname $0)/vfio-teardown.sh注释放开
vm-start.sh虚拟机启动将核显绑定到虚拟机
vm-stop.sh虚拟机关机时将核显从虚拟机卸载并绑定到pve宿主机
添加可执行权限
cd pvevm-hooks
chmod a+x *.sh *.pl
复制perl脚本至snippets目录
mkdir /var/lib/vz/snippets
cp hooks-igpupt.pl /var/lib/vz/snippets/hooks-igpupt.pl
将钩子脚本应用到虚拟机

替换为你需要动态核显直通、返回的虚拟机ID

qm set <VMID> --hookscript local:snippets/hooks-igpupt.pl
检查钩子脚本

此时在PVE中虚拟机的选项菜单末尾出现了钩子脚本。(就是设置虚拟机开机自启、调整引导顺序那里)。

部分使用代码参考

  1. vm-start.sh
#!/bin/bash

VMID="$1"
igd_id="8086 $(lspci -n|grep '0:02.0'|cut -d ':' -f4|cut -c 1-4)"

echo "VM $VMID is starting" > $(dirname $0)/$VMID-hooks.log

#$(dirname $0)/vfio-startup.sh

sleep 1

echo 0000:00:02.0 > /sys/bus/pci/drivers/i915/unbind
if ! lsmod | grep "vfio_pci" &> /dev/null ; then
    modprobe vfio-pci
fi
echo $igd_id > /sys/bus/pci/drivers/vfio-pci/new_id
  1. vm-stop.sh
#!/bin/bash

VMID="$1"
ia_addr="0000:$(lspci|grep 'Audio'|grep 'Intel'|cut -c 1-7)"
usb_addr="0000:$(lspci|grep 'USB'|grep 'Intel'|cut -c 1-7)"
igd_id="8086 $(lspci -n|grep '0:02.0'|cut -d ':' -f4|cut -c 1-4)"

echo "waitting" >> $(dirname $0)/$VMID-hooks.log

sleep 10

TimeSec=0
until ! test -e "/var/run/qemu-server/$VMID.pid"
do
    if [ $[$TimeSec%3600] -eq 0 ]; then
        echo "VM $VMID is running "$(date "+%Y-%m-%d %H:%M:%S") >> $(dirname $0)/$VMID-hooks.log
    fi
    sleep 3
    let TimeSec+=3
done

#卸载vfio中的核显驱动
echo 0000:00:02.0 > /sys/bus/pci/drivers/vfio-pci/unbind
echo $igd_id > /sys/bus/pci/drivers/vfio-pci/remove_id

#绑定显卡驱动到pve
echo 0000:00:02.0 > /sys/bus/pci/drivers/i915/bind


#卸载vfio中的声卡驱动
#echo $ia_addr > /sys/bus/pci/drivers/vfio-pci/unbind
#绑定声卡驱动到pve
#echo $ia_addr > /sys/bus/pci/drivers/snd_hda_intel/bind

#卸载vfio中的usb控制器
#echo $usb_addr > /sys/bus/pci/drivers/vfio-pci/unbind
#绑定USB控制器到PVE
#echo $usb_addr >/sys/bus/pci/drivers/xhci_hcd/bind


sleep 1

#$(dirname $0)/vfio-teardown.sh

echo "VM $VMID stopped "$(date "+%Y-%m-%d %H:%M:%S") >> $(dirname $0)/$VMID-hooks.log
我的世界没光
关注
专栏目录
linux虚拟核显,PVE直通核显搭建虚拟Win10 HTPC避坑指南
weixin_30277297的博客
05-13 8878
在PVE上搭建软路由、NAS等虚拟系统都相对容易，而HTPC却因为核显或显卡的直通问题而相对复杂，本文将详细介绍PVE虚拟环境下，直通给WIN10做HTPC并实现HDMI输出的详细步骤，以及避坑指南。先上成果：左边屏是PVE下直通给WIN10核显HDMI输出的，右边屏PVE控制台看到的虚拟屏。一、准备工作⑴ 一台X86物理机，已经完成PVE虚拟环境的安装配置(版本6.1-7)⑵ PVE物理机BIO...
PVE8.1双直通AMD R7240和10代i5-10400核显UHD630
u011488073的博客
04-16 3355
这次突发奇想，想搞一台看视频的虚拟机（AMD R7240只有HDMI，4K30Hz），正好可以用得上核显的DP（4K60Hz），于是有了下面的经历，记录一下，下次备用。 主要硬件： 主板：ASUS B460M-PLUS重炮手 CPU：INTEL I5-10400，核显UHD630 独显：AMD R7240 WIN11直通独显，网上很多教程，这个很容易。 WIN10直通核显，按照第1篇文章，直通成功。 现在两台显示器正常显示，USB端口可以单独分配给不同虚拟机，接两套键鼠就是两台电脑。
PVE取消核显直通
我的世界没光的博客
08-30 377
因此通过pve_source脚本中的恢复默认设置后,重启发现核显能找到了,但此时sata控制器又需要重新开启iommu才能开启群晖。但是开启了iommu后核显又直通了，说明我们核显直通根本就没关掉，以下操作可以解决。pve中通过pve_source脚本执行了核显直通之后,想要取消核显直通。但作者并未提供取消核显直通的脚本，导致pve宿主机中找不到。如果上述方法没有解决 可以再查看一下。若还是不生效可以参考我上篇文章。让你加的你删除就行了。
5600U PVE安装WIN10后直通核显
会飞的程序猿的博客
01-04 4259
修改PVE系统配置请先安装相同版本的PVE系统，其他版本如果存在问题请自行查找。安装过程比较简单，具体方法请自行百度1. 修改grub启动参数：修改文件 /etc/default/grub 中 GRUB_CMDLINE_LINUX_DEFAULT 配置：其中必须添加的：iommu=pt 设置iommu为直通模式pass throughinitcall_blacklist=sysfb_init 屏蔽掉pve7.2的一个bug。
PVE开启核显直通
我的世界没光的博客
08-30 875
的参数建议添加，以提高未直通设备 PCIe 的性能，PT 模式只在必要的时候开启设备的 IOMMU 转换。接着添加模块（驱动）黑名单,即让GPU设备在下次系统启动之后不使用这些驱动,把设备腾出来给vfio驱动用;，禁用GPU驱动，以便vfio使用。编辑内核模块加载文件。
PVE8直通核显（N100），并开启虚拟化Sriov
Abin17618的博客
01-03 1万+
PVE8直通N100核显，并开启虚拟化Sriov，实现一个显卡直通给多个虚拟机
PVE使用AMD CPU 5600G 核显直通
热门推荐
qq_42912965的博客
09-12 2万+
AMD CPU 5600G 在PVE系统中实现核显直通，其他同系列CPU可以尝试但不保证一定可以成功！
PVE虚拟机核显直通及返回宿主机显示钩子脚本
coolhz的博客
06-30 8473
让你的PVE虚拟机能更完善的驱动核显和显示器输出，还能在虚拟机关闭后恢复PVE宿主机的显示。使用了钩子脚本，可以让PVE图形界面与虚拟机核显直通共存。
锐角云hdmi直通,PVE直通核显给WIN10, 并实现hdmi输出做HTPC
weixin_43350568的博客
02-13 9361
一、开启VT-D，安装pve、虚拟机win10 锐角云是hd500核显，根据该帖子开启VT-D https://blog.csdn.net/maxuearn/article/details/107573139 注：调整显存DVMT Pre-Allocated到512M，DVMT Total Gfx Mem到max用如下命令 setup_var_3 0x3A9 0x10 setup_var_3 0x3AA 0x3 再根据该文章直通hdmi（帖子中的4.UPT模式直通核显） https://www.10be
J4125 PVE虚拟机核显直通显卡驱动
05-29
标题中的“J4125 PVE虚拟机核显直通显卡驱动”指的是使用Intel Pentium J4125处理器的系统，在Proxmox VE（PVE）虚拟环境中进行图形处理器（GPU）直通的技术。J4125是一款四核低功耗处理器，内置了UHD Graphics 600...
锐角云N3450 vbios PVE核显直通 vgabios romfile
02-01
锐角云N3450 vbios PVE核显直通vgabios romfile是一个针对Intel凌动N3450处理器集成显卡在Proxmox VE (PVE)平台上进行直通技术的资源包。这个包包含了实现直通所需的几个关键元素，使得用户能够在虚拟化环境中更好地...
华擎J4105 PVE核显直通所需的vgabios romfile
03-24
自己辛苦dump下来的，经过PVE验证过可以在华擎主板核显直通的vgabios romfile文件。
锐角云 vbios N3450 PVE 核显直通 vgabios romfile
08-15
锐角云vbios N3450 PVE核显直通vgabios romfile相关知识点详解 锐角云是一款基于虚拟化技术的分布式计算平台，它允许用户通过云计算技术利用闲置硬件资源，实现高效能计算。在这款系统中，N3450是一款常见的处理器...
weixin123在线订餐系统的设计与实现+springboot.rar
09-13
所有源码，都可正常运行
weixin262高校校园交友微信小程序springboot.rar
最新发布
09-13
所有源码，都可正常运行
基于java的视频网站系统的设计与实现.docx
09-13
基于java的视频网站系统的设计与实现.docx
weixin153实验室管理微信小程序+ssm.rar
09-13
所有源码，都可正常运行
基于java的宠物商城网站设计与实现.docx
09-13
基于java的宠物商城网站设计与实现.docx
pve安装爱快 网卡直通
08-12
PVE（Proxmox Virtual Environment）是一个开源的虚拟化平台，常用于部署虚拟机。在PVE环境中安装iFast（爱快），网卡直通（NIC passthrough）通常是为了提高虚拟机网络性能，允许虚拟机直接访问物理网络，而不是通过软件模拟的方式。 以下是简单的步骤： 1. **确定硬件需求**：确保你的服务器有可用于直通的物理网卡，并且该网卡支持被虚拟机访问。 2. **配置虚拟机**：在PVE的Web界面中，创建新虚拟机时，在"硬件设置"部分选择"高级"，找到"网络适配器"选项，勾选"网卡直通"（有时也称为"passthru"或"Direct attachment"）。 3. **指定网卡**：从可用的物理网卡列表中选择你想直通的网卡。 4. **启动并分配IP**：创建好虚拟机后，启动它并在操作系统内手动分配或获取IP地址，以便连接到网络。 5. **配置防火墙**：如果有必要，记得在服务器和虚拟机的防火墙上打开相应的端口，以允许外部通信。 6. **测试连接**：验证虚拟机是否能正常上网或其他网络操作。 请注意，直通网卡需要谨慎操作，因为如果管理不当可能会导致物理网络故障。另外，不是所有硬件和操作系统都支持网卡直通，所以在尝试前最好查阅相关的文档或咨询专业人士。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

我的世界没光

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值