视频编解码基础

实用的编码器，往往在一个编码框架下，使用多种编码（压缩）方法 根据编译原理不同可以将其划分为：预测编码，变换编码，量化编码， 熵编码
视频编码通过帧内预测消除时间冗余，通过帧内预测消除空间冗余
预测编码 是最基本的编码方式：包括帧间预测编码，和帧内预测编码
空间冗余：信息在空间有连续性：即利用一帧图像已经编码的部分来预测尚未编码的部分
时间冗余：信息在时间有连续性：即利用之前编码过的图像来预测当前图像需要编码的内容
实际值减去预测值可以得到预测的残差值
所以说传输的基本上传输的就是残差值
预测通常以块为单位 按照约定的规则将图像分割成规则大小的块 ，并按照约定的顺序依次各个块进行预测编码。
在编码当前块的时候，会用到已经编码块的像素作为预测器的输入
帧间预测编码
就是利用之前编码过的图像来预测现在要编码的图像 视频编码每秒要编码十几-几十帧图像，只要没有瞬间切换，帧与帧之间的关联就会特别大，所以只要采取合适的预测方法，得到的预测残差值就会 非常小
知识点： 运动估计和运动补偿 目的：消除时间冗余
运动估计就是寻找当前编码的块在已编码图像（称为参考帧）中的最佳对应块，并计算出对应块的偏移（运动矢量）所以说只要参考帧和参考块选取合适，需要编码的残差值就会特别小 当然运动矢量也需要合适的方法 编码到码流中
运动补偿就是根据运动矢量和帧间预测方法，求出当前帧的估计值的过程，是对当前图像的描述，意思就是当前图像的每一个像素如何由其参考图像的像素块得到
运动估计的参考帧，前向，后向，以及双向预测
帧内预测编码
色度信息和亮度信息是被分开预测的，对于亮度待编码块可以按照4*4块方式预测 或者16*16宏块预测
对于色度信息则基于8*8块进行预测
当4*4块大小预测时，有九种模式，16*16块大小预测时有4种模式，
对于色度信息，则基于8*8块进行预测 ， 预测模式也有4种
技术总结：h.264帧内预测提供4*4 和16*16 两种分块方式
4*4 块用于图像细节部分的预测，可以提高预测精度，
16*16块用于预测平坦的图像区域 能够在保证帧内预测精度的同时降低运算复杂度和码率（少的编码预测模式）
变化编码
把信号变换到另一个域 都是数学 离散傅里叶什么的