[论文]Pseudo-Sequence-Based 2-D Hierarchical Coding Structure for Light-Field Image Compression

最新推荐文章于 2022-12-01 20:49:17 发布

liangjiubujiu

最新推荐文章于 2022-12-01 20:49:17 发布

阅读量510

点赞数

本文链接：https://blog.csdn.net/liangjiubujiu/article/details/81231565

版权

总结

目前看到的方法，无论是利用数学工具（低秩、稀疏编码）还是HEVC等，本质都是得到一张预测图（视差引导的对齐图、视差补偿的稀疏编码图、运动补偿预测图），传输残差图和变换方式，达到减少传输数据量的目的。

摘要

使用伪视频序列的方法对光场图像矩阵进行压缩。提出了三个方法更高效地处理光场在空间和角度上地冗余。方法一，给出一种生成伪视频的帧排列方法，方法二，计算当前图和备选参考图之间的距离，用来挑选一张较好的参考图，也用于位移矢量缩放。方法三，最优比特分配法考虑了不同的图像对下一帧编码图像的影响，进一步去冗余，提高编码效率。

关键词

比特分配分层编码结构 HEVC 光场图像伪序列

方法一

总结：视频编码前重排的原理是根据IPB帧，常采用IPBBPBB的顺序即0635421,对行和列进行重新排序，以增加压缩比。

图1

首先，取出图片质量较好的1-164号子图，作为压缩对象。接下来，找到和其他视角的子图像相似度最高的图作为I帧，使用平均帧内每一个像素点的差值大小，作为相似度评判标准。

表1

表1显示了12张测试图像中，编号为POC的图像是当前测试图像中可作为相似度最高的图像。可发现，最优子图的位置在子孔径图像矩阵的中心位置。

图2

在1维层级编码结构中，一种深度优先的帧重排顺序，将16帧划为一个GOP，对其中的每一帧进行重新排列，这种方式可以最小化参考帧的缓冲区大小。如图所示16帧为一个GOP时，参考帧缓冲区的大小为5。

为了加大压缩比，通常在I帧后面相隔2帧（最多3帧）设置1个P帧，在I、P帧之间都是B帧，在两个P帧之间也是设置2～3帧B帧。B帧传送它与I帧或P帧之间的差值信息，或者P帧与后面P帧或I帧之间的差值信息，或者它与前后I、P帧或P、P帧平均值之间的差值信息。当主体内容变化愈大时，两个I画面之间的帧数值越小；当主体内容变化小时，I面画的间隔可以适当大一些。或者说，B帧、P帧所占比例越大，图像压缩比越高。一般两个I画面相隔13～15帧，相隔帧数不宜再多。

总的来说是按照传统IPBBPBB的方式，二分优先，其次是顺序。最下方是第一行，一次向上递增。最右下角是第0帧，依次编号。编完第0行再编最右边的第一列。第3行编完再编第5行。每一行的顺序是自右向左0635421，按列将行排序的顺序是0（右边一列公共列）635412。

图3

红色：被当作参考帧的概率最大，整个编码区域（象限）内所有的帧均可以把红色帧作为自己的参考帧，这些红色帧的存在保证了对当前帧的很好的预测。

绿色：整个编码区域内位于同一行的帧均可以把绿色帧作为自己的参考帧。

黄色：紧挨着黄色的26号帧的下一帧-27号可以吧26号作为参考。

灰色：不能被选为其他帧的参考帧。

方法二

总结：

当GOP=16时，缓冲区最多需要存12张参考帧，如果所有需要预测的帧都需要从缓冲区提取参考帧，那么缓冲区的帧数为48，这样的规定动态地增大了编码的复杂度。而且，大量的参考帧增加了附加位比特数（overhead bits，基于距离的参考帧选择算法减少了附加位的比特数并且减少了编码的复杂度；不同子图的空间位置在合并过程中对运动矢量的缩放和向前的运动矢量预测模式均有影响。因此提出的基于空间坐标的运动矢量（MV）缩放法能提高编码效率。