TIMD
TIMD(template-basedintra mode derivation)是一种新的帧内预测模式,它由DIMD(decoder-sideintra mode derivation)发展而来。
TIMD模式由MPM中的候选模式和模板生成。如上图所示,当前CU的左侧和上方区域构成当前CU的模板,模板附近是其参考像素。TIMD模式生成过程为:使用MPM中的每个模式为模板生成预测值,然后计算模板预测值和重建值的SATD,选择SATD最小的模式作为TIMD模式,并用于当前CU的预测。其中在生成TIMD的过程中开启PDPC。
TIMD传输
SPS中需要一个标志位表示是否允许使用TIMD,如果序列开启TIMD则每个CU需要一个标志位表示当前CU是否使用了TIMD。TIMD标志位放在MIP标志位之后。如果开启了TIMD标志位,则剩余的亮度帧内预测相关的语法元素包括MRL、ISP和正常的亮度帧内预测模式解析过程都跳过。
Fusion TIMD
在上面的TIMD中,从MPM中选择模板的SATD最小的一个模式,而FTIMD选择SATD最小的两个模式,然后使用这两个模式对当前CU进行加权预测。
选择的两个模式还需要进行阈值比较:
costMode2< 2*costMode1
如果上面条件满足则使用两个模式进行加权预测,否则只使用模式1。
如果使用两个模式进行加权预测,则权值分别为:
weight1 = costMode2/(costMode1+ costMode2)
weight2 = 1 - weight1
实验结果
在ECM1.0上all intra配置下TIMD和FTIMD结果如下:
参考文献
[1]KemingCao, Nan Hu, Vadim Seregin,"Fusion for template-based intra modederivation",JVET-W0123
[2]Yang Wang, LiZhang, Kai Zhang,"Template-based intra mode derivation using MPMs"
感兴趣的请关注微信公众号Video Coding