DXVA视频硬件加速

原文地址:https://baike.baidu.com/item/dxva/2860652?fr=aladdin

About DXVA 2.0:https://docs.microsoft.com/en-us/windows/desktop/medfound/about-dxva-2-0

DirectX Video Acceleration:https://en.wikipedia.org/wiki/DirectX_Video_Acceleration

DXVAChecker:http://bluesky23.yukishigure.com/en/DXVAChecker.html

DXVA是DirectX Video Acceleration的简称,中文译为视频硬件加速。DXVA是微软公司专门定制的视频加速规范,它共有两个版本,分别是DXVA 1.0和DXVA 2.0。DXVA规范不仅仅是在视频播放过程中的解码计算规范,其还有与视频后期处理息息相关,例如反交错色彩空间转换或图像缩放等等。对于视频播放时CPU利用率影响最大的,通常也是我们最关心的,非视频解码莫属,尤其是 HD视频的解码(硬件解码),对于CPU较弱的系统来说,让显卡来完成解码是不二之选。

概述

硬件加速

当前市面上几乎所有的显卡都具备一定的视频硬件加速能力。微软公司为此专门制订了DXVA规范(包括DXVA 1.0和DXVA 2.0两个版本)。但使用硬件加速,在视频播放的总体流程上也受到诸多限制,尤其是后期处理部分。因此对于追求后期效果的高清发烧友,宁可放弃硬件加速,当然代价可能是需要升级CPU甚至整个系统。 DXVA规范中,不同的显卡的视频硬件加速能力有差异,有的显卡支持的加速项目较多,有的显卡支持的较少,从显卡的发展历程来看,视频硬件加速能力总体是逐渐增强的,但在同一代显卡中,高端显卡的视频硬件加速能力不见得比低端显卡的强,甚至有些时候还会弱些。 对于高清发烧友来说,可以接触到的高清视频源的编码格式主要有MPEG2, H.264WMVVC-1四种。DXVA 1.0规范里最早定义了MPEG2和WMV硬件解码能力,在DXVA 2.0里又增加了H.264和VC-1硬件解码能力。

视频硬件解码能力的成功运用,需要几个环节的配合。首先,显卡硬件需要支持特定的视频编码格式;其次,显卡驱动需要正确的报告显卡硬件的这种能力;最后,视频解码器需要能够启用这种能力(这可能会进一步涉及到分离器和渲染器的配合)。当然,视频源本身也必须是这种编码格式。

还有一点需要特别注意的是,DXVA是一种接口规范,显卡硬件支持DXVA规范,不代表就实现了里面所有的功能,但是肯定的一点是,无论什么功能,显卡驱动的DXVA部分代码一定会告诉系统,这项功能它实现了还是没有实现,这是DXVA规范强制性要求的。好处是系统不需要自己去测试显卡有没有实现这项功能。解码器支持DXVA规范,不代表就能利用DXVA规范里面所有的功能组合,它可以选择自己有能力支持的,或者想要支持的那些功能组合,其他功能组合也许就放弃了。还有,某显卡虽然表示支持某种能力,但如果解码器认为这个能力的支持不够稳定,容易导致系统崩溃或错误,或者性能低下,它也可以放弃这种能力。

硬解能力级别

DXVA2_ModeH264_A (DXVA2_ModeH264_MoComp_NoFGT)

DXVA2_ModeH264_B (DXVA2_ModeH264_MoComp_FGT)

DXVA2_ModeH264_C (DXVA2_ModeH264_IDCT_NoFGT)

DXVA2_ModeH264_D (DXVA2_ModeH264_IDCT_FGT)

DXVA2_ModeH264_E (DXVA2_ModeH264_VLD_NoFGT)

DXVA2_ModeH264_F (DXVA2_ModeH264_VLD_FGT)

DXVA2_ModeMPEG2_IDCT

DXVA2_ModeMPEG2_MoComp

DXVA2_ModeMPEG2_VLD

DXVA2_ModeVC1_A (DXVA2_ModeVC1_PostProc)

DXVA2_ModeVC1_B (DXVA2_ModeVC1_MoComp)

DXVA2_ModeVC1_C (DXVA2_ModeVC1_IDCT)

DXVA2_ModeVC1_D (DXVA2_ModeVC1_VLD)

DXVA2_ModeWMV8_A (DXVA2_ModeWMV8_PostProc)

DXVA2_ModeWMV8_B (DXVA2_ModeWMV8_MoComp)

DXVA2_ModeWMV9_A (DXVA2_ModeWMV9_PostProc)

DXVA2_ModeWMV9_B (DXVA2_ModeWMV9_MoComp)

DXVA2_ModeWMV9_C (DXVA2_ModeWMV9_IDCT)

视频硬件解码的能力的级别从高到低的顺序如下,能力越高,显卡能够分担的视频解码计算量就 越多。

 

VLD(视频bitstream处理)->IDCT(帧内压缩)->MoComp(帧间压缩)->PostProc(后期处理)

VLD级别的解码包含IDCT, MoComp和PostProc,

IDCT级别的解码包含MoComp和PostProc

MoComp级别的解码包含PostProc

对于H.264编码,还有一个称为FGT(Film Grain Technology)的技术,即所谓胶片感,目的是在不 牺牲压缩能力的同时保持视频源特有的颗粒信息。

 

功能

视频解码对于我们普通用户来说可以分成两类,一类是以CPU为核心的软件解码,另一类就是如今主流的以GPU为核心的硬件加速解码。

就目前来看,二者各有利弊。

软件解码好处是,第三方软件解码器齐全通用性高,使用CPU来作为解码核心能够满足几乎所有的视频解码。而坏处也显而易见,在一台CPU性能较弱的平台上,尤其是在看高码率的高清视频时,CPU由于线程数和自身架构导致的效能上不足,视频画面卡、顿、慢成为不可避免的结局。

硬件加速解码好处是,如今主流显卡都能够很好的支持主流视频格式解码,尤其是在图形核心采用统一架构后,利用图形核心的并行架构设计,在H.264VC-1格式高清视频上有绝佳的支持效果。弊端是,硬件解码受限视频播放总体流程,尤其是后期处理部分。所以很多追求最终画质效果的高清发烧友,宁可放弃硬件(GPU)加速解码的几倍性能,而选择基于CPU的软件解码

根据DXVA的规范制定,硬件加速解码可分为四个级别,它们由高到低分别是:

VLD(bitstream方面的处理)>IDCT(帧内压缩)>MoComp(帧间压缩)>PostProc(显示后处理)

从上面的等级分布上不难看出,VLD加速等级最高,所以其包含IDCT、MoCoopm和PostProc;IDCT加速次之,包含MoCoopm和PostProc;最后MoComp加速仅包含PostProc。

对于仅支持MC加速的显卡只有在2005年以前的老产品上出现,当NVIDIA进入GeForce 6000系列和AMD进入Radeon X800系列后,图形核心的硬件加速能力达到了IDCT加速级别。而当显卡进入图形核心统一架构设计后,GeForce 8000和Radeon HD 2000开始进入目前最高的VLD加速。

不过值得一提的是,由于NVIDIA的高清硬件加速功能基于Video Pocesser单元设计,而最早出现的GeForce 8800系列(G80核心产品)没有开放此功能单元设计,所以NVIDIA真正进入VLD加速是从2007年4月发布的GeForce 8600/8500系列开始 [1] 

视频实现

DXVA有三种视频加速级别

MC加速

MC加速+iDCT加速

MC加速+iDCT加速+VLD[1]加速

[1]VLD: Variable-Length Decoding,即可变长度解码

解码器

PowerDVD(CyberLink): 著名的商业播放器

Nvidia PureVideo: 从名字就可以看出,Nvidia公司出品的视频解码器

MPC-HC: 继承了历史悠久的开源播放器MPC的衣襟,并在其基础上增加了许多实用功能

PotPlayer: 原Kmplayer作者开发的另一款播放器

ffdshow: 著名的开源编解码器,功能强大,内置了许多实用滤镜,在最近的版本中加入了DXVA模块

在当前,虽然有许多播放器支持DXVA解码,但综合考虑MPC-HC是最为实用并且方便实用的。首先MPC-HC是开源软件,其次MPC-HC是绿色软件,无需安装即可使用,再则MPC-HC内置的字幕滤镜比起其他播放器,对ASS/SSA的支持度最高。因此接下来着重介绍MPC-HC

MPC-HC的DXVA对显卡的限制:

nVidia 8(9)xxx系列,仅支持H.264

ATI Radeon HD系列,支持H.264和VC-1

Intel G45,仅支持H.264

在未来,MPC-HC可能会增加对运动补偿模式的支持,以兼容更多古老的显卡。但在当前,还不支持MPEG2和WMV硬件加速

由于DXVA的限制,所使用的渲染器必须遵守以下规则:

Windows XP用户,必须使用覆盖合成器(Overlay Mixer),VMR 7或VMR9作为视频渲染器(Video Renderer)

Windows Vista/7用户,必须使用增强型视频渲染器(Enhanced Video Renderer/EVR)或EVR custom renderer

MPC-HC视频解码器必须直接连接视频渲染器,因此中间无法插入DirectVobSubffdshow之类的滤镜。 在DXVA模式中,外挂字幕可以通过MPC-HC内置的字幕滤镜来显示,但是对渲染器的要求更苛刻

Windows XP用户,必须使用VMR9

Windows Vista/7用户,必须使用EVR custom renderer

在 选项(Options)/播放(Playback) 中,勾上 自动装载字幕(Auto-load subtitles)

支持视频

可以通过软件来检测:DXVAChecker

说了那么多,其实只是想说视频加速解码真是个复杂的东西。需要硬件,解码器,视频本身等多方面的支持方可促成视频硬解。虽然复杂,但这是值得的。通过视频加速解码,我们可以将CPU从繁重又重复的工作中解放出来,让它在别的地方发挥自己的性能,以及让那些由于CPU性能孱弱但有一块还不错的显卡的电脑同样可以享受高清视频。

压制篇(x264版)接下来将介绍如何压制一个能使绝大多数硬件加速解码方案都支持的视频 使用的编码器是x264,它是一个效率非常高的开源编码器,基于H.264标准设计。

规格分类

首先H.264的视频按照标准被分为几个规格

Profile在x264中被分为baseline/main/high (Profile越高级,支持越多的高级特性,成品的压缩率越高)

x264相关参数:--profile 可强制指定Profile,一般情况下可不选,x264将会根据其他参数自行设定此项。如果设置此项,x264将会自动无视所设Profile无法支持的高级特性。

Level被分为1/1.1/1.2/1.3/2/2.1/2.2/3/3.1/3.2/4/4.1/4.2/5/5.1 (Level越高,对分辨率/参考帧/码率的限制越小)

x264相关参数:--level 可强制指定Level,一般情况下可不选,x264将会根据实际情况自行设定此项,但自动设定并不一定准确。如果设置此项,x264将会自动限制DBP[2]。

[2]DPB,即Decoded Picture Buffer。

 

<p style="margin: 10px 0px 0px; max-width: 100%; box-sizing: border-box; font-family: 'Hiragino Sans GB', 'Microsoft Yahei', arial, 宋体, 'Helvetica Neue', Helvetica, STHeiTi, sans-serif; font-size: 14px; background-color: #ffffff; color: #3e414d; font-weight: bold;">FFmpeg+DXVA2+D3D硬件加速原理与案例实战</p> <p style="margin: 10px 0px 0px; max-width: 100%; box-sizing: border-box; font-family: 'Hiragino Sans GB', 'Microsoft Yahei', arial, 宋体, 'Helvetica Neue', Helvetica, STHeiTi, sans-serif; font-size: 14px; background-color: #ffffff; color: #666c80;">FFmpeg系列之34:<br />FFmpeg+DXVA2+D3D硬件加速原理与案例实战,带领大家一起来学习dxvadxva2的入门知识,学习D3D开发入门实战,然后使用FFmpeg+dxva2+d3d进行硬件加速案例实战。大家在学习需要认真观看视频,并分析知识点,然后需要动手实践。</p> <p style="margin: 10px 0px 0px; max-width: 100%; box-sizing: border-box; font-family: 'Hiragino Sans GB', 'Microsoft Yahei', arial, 宋体, 'Helvetica Neue', Helvetica, STHeiTi, sans-serif; font-size: 14px; background-color: #ffffff; color: #666c80;"> </p> <h1 style="box-sizing: border-box; margin: 0px; font-weight: 400; line-height: 1.2; font-size: 14px; font-family: 'PingFang SC', 'Hiragino Sans GB', Arial, 'Microsoft YaHei', Verdana, Roboto, Noto, 'Helvetica Neue', sans-serif; padding: 0px; color: #333333;"><span style="box-sizing: border-box; margin: 0px; padding: 0px;"><span style="box-sizing: border-box; margin: 0px; padding: 0px; max-width: 100%; color: #ff0000;">目前FFmpeg第二季【</span></span><span style="box-sizing: border-box; margin: 0px; padding: 0px;"><span style="box-sizing: border-box; margin: 0px; padding: 0px; max-width: 100%; color: #ff0000;">编解码专题</span></span><span style="box-sizing: border-box; margin: 0px; padding: 0px;"><span style="box-sizing: border-box; margin: 0px; padding: 0px; max-width: 100%; color: #ff0000;">】,主要包括以下课程:</span></span></h1> <p style="box-sizing: border-box; margin: 0px; padding: 0px; font-family: 'PingFang SC', 'Hiragino Sans GB', Arial, 'Microsoft YaHei', Verdana, Roboto, Noto, 'Helvetica Neue', sans-serif; color: #333333; font-size: 14px; max-width: 100%;"><span style="box-sizing: border-box; margin: 0px; padding: 0px; max-width: 100%; font-size: 18px;"><span style="box-sizing: border-box; margin: 0px; padding: 0px;">FFmpeg4.3系列之31:图像格式与压缩<br style="box-sizing: border-box;" />FFmpeg4.3系列之32:MPEG-1/2视频编解码<br style="box-sizing: border-box;" />FFmpeg4.3系列之33:H.264/H.265视频编码<br style="box-sizing: border-box;" />FFmpeg4.3系列之34:FFmpeg+DXVA2+D3D硬件加速<br style="box-sizing: border-box;" />FFmpeg4.3系列之35:FFmpeg+CUDA硬件加速</span></span></p>

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
©️2022 CSDN 皮肤主题:护眼 设计师:闪电赇 返回首页
评论
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、C币套餐、付费专栏及课程。

余额充值