服务器显卡直通和GPU问题分析

从最开始买服务器的时候我就问了商家，能不能用显卡，商家答复厚度不超过2CM的刀卡是可以用的；并且在安装macOS的时候，我也发现3M的显存是真的不够用，上显卡的冲动再次涌上心头。

显卡适配关系

服务器作为比较特殊的设备，和普通PC不同，支持的显卡型号有限，以下为我从HPE官网找到的显卡适配关系，与其说是显卡，不如说是GPU，更偏向于计算，适合搞AI（所以一开始有朋友问我是不要开始搞大数据或者人工智能了，让大家失望了）。标红部分为已经查明的支持vGPU的显卡型号，也就是能按需分配给虚拟机。

 

这时我意识到，服务器有适配关系，那VMware ESXi是不是也有适配关系？我就找HPE的售后400工程师咨询了一下，大跌眼镜！直接丢给我一个查询配套关系的软件，下载原始链接如下：

http://h20195.www2.hpe.com/v2/redirect.aspx?/products/quickspecs/15033_div/15033_div.HTML

应该是GFW的原因，源链接打开失败，但是会跳转到一个新的链接：

http://h41370.www4.hpe.com/quickspecs/overview.html

这个是DL360 Gen9所有可扩展配置的配置表，最终查明这款机器只支持一款GPU：

HPE NVIDIA Quadro P4000 Graphics Accelerator

 

并且对电源有要求，好在我的500W电源应该是够用的。

 

上面的图里也有我查的价格，6500块差不多够我再买一台服务器了。并且咨询得知NVIDIA的显卡都涉及授权问题，之前的经验中NVIDIA会针对每个VDI（Virtual Desktop Infrastructure，约等于虚拟机）收取授权费用，大约为每个VDI每5年8000块；这么贵，不如直接去抢钱好了！

远程桌面

假设我是一个很有钱的工程师，我买了NVIDIA的显卡并且购买了授权。那我能不能实现在虚拟机里面打游戏呢？常规操作是不行的。

因为在使用windows远程桌面的时候，调用的不是虚拟机或者原主机的显卡。而是Windows 远程桌面虚拟的显示驱动，也就是说原本的物理显卡根本就没有调用过。微软的相关解释链接如下：

https://docs.microsoft.com/zh-cn/windows/win32/termserv/remote-desktop-protocol

部分说明如下（引用链接: Remote Desktop Protocol）：
On the server, RDP uses its own video driver to render display output by constructing the rendering information into network packets by using RDP protocol and sending them over the network to the client. On the client, RDP receives rendering data and interprets the packets into corresponding Microsoft Windows graphics device interface (GDI) API calls. For the input path, client mouse and keyboard events are redirected from the client to the server. On the server, RDP uses its own keyboard and mouse driver to receive these keyboard and mouse events.

在服务器上，RDP通过使用RDP协议将渲染信息构造为网络数据包并将其通过网络发送到客户端，从而使用其自己的视频驱动程序来渲染显示输出。在客户端上，RDP接收渲染数据并将数据包解释为相应的Microsoft Windows图形设备接口（GDI）API调用。对于输入路径，客户端鼠标和键盘事件从客户端重定向到服务器。在服务器上，RDP使用其自己的键盘和鼠标驱动程序来接收这些键盘和鼠标事件。

这部分我在自己电脑上测试过，一台GT 740M（2G显存）显卡的电脑，打游戏帧率能到120帧以上；但是如果通过远程桌面来操作，会同时消耗本地PC的带宽和显卡资源。测试中使用无线网络时，占用十几兆的带宽资源游戏帧率也达不到10帧，已经卡成幻灯片了；当使用有线网络时，带宽占用超过50M时，帧率也没有达到30帧，操作还是会有卡顿。

 

说到这里，我对5G时代下的云端游戏功能产生了怀疑，我到底需要多大的带宽和多低的延迟才能远程打游戏？是不是有其他解决方案？

好像确实有，如果要调用vGPU，需要有特有的软件，才能启用物理显卡功能。现在新华三的CAS貌似有这个东西，远程桌面调用物理显卡。但是也可以用远程工具调用物理显卡，目前测试可行的就有向日葵、TeamViewer。比如说使用向日葵能达到和直接操作物理机比较接近的117 fps。

 

显卡直通

回到现实中，我没有那么多钱来买GPU和授权怎么办呢？我就不能让我的虚拟机用显卡了吗？

通过咨询专家还有上网查找资料，发现可以通过设置PCI设备直通来实现。简单地讲，就是把PCI插槽直接分配给虚拟机，这样的话，一定意义上就跳过了服务器的适配关系，直接在虚拟机上装驱动就可以了。

先检查一下ESXi是否支持。在ESXi管理页面，“管理”→“硬件”→“PCI设备”，选择PCI物理设备，再点击“切换直通”。可将PCI设备模式切换为直通模式（passthrough），这样就可以分配给主机了。

 

然后我就在京东上买了一块AMD的显卡（盈通的RX550，4G显存版本）。服务器的PCI扩展槽是这样的，主要是实现了将显卡从竖插变成了横插，同时将显卡厚度限制到了2CM。

 

插上显卡之后底面是这样的。

 

把PCI扩展插槽撞到服务器上，上面是这样的。

 

切换PCI直通模式

显卡就位之后开机，在iLO中的设备信息里面能看到识别到了显卡，显示信息为AMD Radeon。

 

登录VMware ESXi，在“管理”→“硬件”→“PCI设备”下面，要选择两个PCI物理设备（分别是图形和音频设备），再点击“切换直通”，这样显卡就切换到直通模式了。需要注意的是，切换直通之后需要重启服务器生效。

 

重启完成后，查看显卡的直通状态由“禁用”变成了“活动”。

 

虚拟机添加PCI设备

新建一台Windows7的虚拟机，与之前操作不同的是，现在可以添加“PCI设备”了。点击“添加其他设备”→“PCI设备”。

 

为避免出现问题，我两次添加设备，把显卡的图形设备和音频设备都添加上来了。

 

系统提示：添加PCI设备之后，需要为虚拟机预留所有内存才能启动，可以点击“预留所有内存”同步内存配置。最终虚拟机配置信息如下。

 

Windows7环境下尝试加载

启动虚拟机后发现视频设备是未识别的，首先通过安装VMware Tools可以解决基本系统设备的感叹号问题；VGA图形适配器则需要打设备驱动解决。

 

通过鲁大师检测硬件信息，硬件识别正常。

 

使用360驱动大师完成显卡和声卡的驱动更新。

 

发现有新的AMD Log Utility Driver设备未识别，上网查了一下，大概意思是说版本不匹配导致的。

 

那就去官网下一个匹配的吧，型号和操作系统都选好，下载好驱动；再把之前的驱动卸载。

 

AMD的最新驱动程序Radeon Software。

 

弹出信任驱动程序发布者的弹窗，一度让我认为快成功了。

 

实际上还是没有解决问题，很尴尬。

 

Windows10环境下尝试加载

我又想到Windows7去年停止维护了，是不是这个有影响？那就再装一台Windows10虚拟机，开机竟然直接识别了AMD的显卡。

 

装好VMware Tools之后，看上去好像没有问题了。

 

鲁大师硬件检测信息也正常了不少。

 

但是跑分性能极低！

 

更新驱动之后频率和带宽识别都不正常了。

 

搞得我有点慌了，赶紧找售后。售后先是答复显卡没有服务器的驱动，我说我装的Windows10操作系统；然后加了技术的QQ，技术一顿操作，还是解决不了显卡PCI-E速率和显卡速率不匹配的问题。呦呵，完蛋，可能还是和服务器PCI有关系，只能七天无理由退货了！

所以，没钱搞什么GPU？搞什么vGPU？搞什么显卡直通？只能友情提醒大家最近不要在京东买RX550这款显卡了，免得买到我退货的商品，显得尴尬！