视频编解码理论基础

最新推荐文章于 2024-03-08 16:07:20 发布

桑来93

最新推荐文章于 2024-03-08 16:07:20 发布

阅读量855

点赞数

分类专栏： [音视频技术] 文章标签：视频编码

本文链接：https://blog.csdn.net/qjh5606/article/details/78458183

版权

[音视频技术] 专栏收录该内容

14 篇文章 1 订阅

订阅专栏

参考博客

前置知识
 视音频压缩编码基本原理

本文部分结合H.265/HEVC的编码技术进行介绍编解码的基础知识.

混合编码框架

这里写图片描述
• （1）代表的是预测模块，包括帧内预测和帧间预测，帧内预测用于消除空间冗余；帧间预测则主要用于消除时间上的冗余。
帧内预测所使用的帧我们称为I帧;帧间预测所使用的帧分为P帧和B帧，P帧指的是向前预测帧，而B帧指的是双向预测帧。
预测是为当前编码块构造尽可能准确的预测块，从而得到能量较小的残差块。目的是能量较小的残差块可以减少传输比特。
• （2）代表的是变换和量化，在（2）模块的左边有一个特殊的数据处理符号，这个符号下面还有一个减号，此处代表的是求残差，就是说，我们从（1）模块中得到的预测后的图片和原始图片的差值，称为残差。可以看到，变换和量化的输入就是刚刚得到的残差。
• （3）这个一个完整的解码器，包括反量化、反变换、滤波。之所以编码器中要有一个完整的解码器，是因为编码器中最重要的是模块（1）预测模块，而做预测是要有参考帧的，基于已有的参考帧才可以对当前帧做帧内或者帧间预测。为了实现编码器和解码器的一致性（为了预测的准确性，编码器和解码器做预测的时候所参考的图片必须是一样的，所以在编码器中寸在了一个完整的解码器，这个解码器的作用是为实现参考帧的一致性）。
• （4）这个模块是从码流的视角进一步对视频流压缩，主要是消除编码冗余。

帧内预测

• 消除空间冗余
• 帧内预测，利用当前图像内已经编码的像素生成预测值
• 生成预测值之后，和原始的值相减，得到残差，后续的变换量化等操作就是基于残差进行处理的

帧间预测

消除时间冗余
帧间预测，利用相邻图像中已经编码的像素(编码器中解码部分获得)生成预测值
生成预测值之后，和原始的值相减，得到残差，后续的变换量化等操作就是基于残差进行处理的
主要原理:
- 运动估计（motion estimation，ME）——提取当前图像运动信息的过程。为当前编码块在已编码块中寻找最佳估计块，使得预测块与当前块残差尽可能的小，并计算当前块的偏移MV（motion vector）.
- 运动补偿（motion compensate，MC）——根据运动矢量MV和帧间预测方法，求得当前帧的估计值.运动补偿即进行插值,进行1/2、1/4像素精度的运动估计，最后得到最优的匹配块.