H.266提案阅读1 - - JVET-A1001帧内部分

H.266提案阅读1 -  -   JVET-A1001帧内部分改进

主要参考文件：JVET-A1001：下载链接

参考博客链接：VVC/H.266会议提案阅读（一）之JVET-A1001

暂时只做搬运，后续再补充

2021-01-30

--------------------------------------以下为原文------------------------------------------

 

JVET-A1001

帧内编码

帧内编码的改进主要有：帧内预测模式的增加、MPM模式增加、滤波器的改进、边界滤波、色度预测CCLM、位置相关的帧内预测组合（PDPC）、自适应参考样本平滑，下面逐个进行介绍。

1、67种帧内预测模式（67 intra prediction modes）

为了捕捉自然视频中更精细的边缘方向，帧内角度预测模式由HEVC的33种增加到了65种，加上DC和Planar模式，一共67种预测模式，其中红色线为增加的预测模式。

同时，为了适应增多的预测模式，最有可能模式数（MPM）也在增加到6个，具体如下表：

其中，L表示左边邻近块的预测模式，A表示右边邻近块的预测模式。
对于6个MPMs的熵编码，采用了截断的一元二值化方法。前三个bin是用上下文编码的，其上下文依赖于左边和上面相邻的帧内模式，其余的是旁路编码。

2、四抽头滤波器（Four-tap intra interpolation filter）

相对于HEVC的双抽头线性插值滤波器，JEM1使用两种四抽头滤波来改善角度预测的准确性。其包括：适用于4x4和8x8块的三次插值滤波器（Cubic interpolation filters），适用于16x16和更大块的高斯插值滤波器（Gaussian interpolation filters ）。该滤波器的参数根据块大小确定，并对该方向模式下预测块内所有预测像素使用相同的滤波器。

3、边界滤波器（Boundary prediction filters）

在HEVC中，在生成垂直和水平的帧内预测块后，分别对预测样本的最左边的列和最上面的行进行调整，现在，该方法进一步扩展到多个对角帧内模式，并使用双抽头(用于帧内模式2和34)或三抽头过滤器(用于帧内模式3-6和30-33)进一步调整至多为四列或行的边界样本，如下图为模式30到34滤波过程：

其中，Line1：[8,8]，Line2：[12,4]，Line3：[14,2]，Line4：[15,1]均表示滤波器系数。

4、色度预测CCLM（Cross component prediction）

为了减少色度分量冗余，在LM预测模式下，采用如下线性模型，使用同一块重构的亮度样本进行色度样本预测：

rec(i,j)为已重构的亮度分量，pred(i,j)为预测的色度分量，α和ρ分别为参数。
在JEM中，LM预测模型扩展到两个色度分量之间的预测，即用Cb分量预测Cr分量。将交叉分量预测方法应用于残差域，而不是利用重构的样本信号。通过在原始Cr帧内预测的基础上加入加权重构Cb残差，形成最终Cr预测：

pred(i,j)（带星号）为最终预测的Cr分量，pred(i,j)为预测的色度Cr分量，resi(i,j)为Cb分量的残差，α为相应的参数，其从LM中提取。

5、位置相关的帧内预测组合（PDPC）

PDPC（Position dependent intra prediction combination）是帧内预测的后处理，它是调用HEVC帧内预测与未过滤边界参考样本进行组合，基本原理为：使用滤波后的参考样点s(x,y)生成预测值q(x,y)，再将此预测值q(x,y)和未滤波的参考样点r(x,y)进行加权平均得到最终的预测值p(x,y)，如下图：


其中，c均为相关参数，当预测块小于等于16时，d=1，当预测块更大时，d=2，b(x,y)则根据以下公式求取：

在RDO过程，使用用标志符flag表示CU是否应用PDPC。值0表示使用现有的HEVC帧内预测，值1表示使用PDPC。

6、自适应参考样本平滑

在HEVC中，采用了模式相关的参考样本平滑（mode-dependent reference sample smoothing）。引入了一种新的参考样本滤波机制（Adaptive reference sample smoothing）。如图所示，两个低通滤波器(LPF)用于处理参考样本：
1、3-tap LPF with the coefficients of [1, 2, 1] / 4
2、5-tap LPF with the coefficients of [2, 3, 6, 3, 2] / 16
这个机制和HEVC的参考样本平滑滤波机制类似，需要注意的是，在JEM中，当一个CU的PDPC标志为1时，该CU中禁用自适应样本平滑。