视频编解码的步骤和主要技术

视频压缩过程一般分三个步骤：

1. 时间维压缩 - 以参考帧的数据预测当前帧的数据，输出预测向量和残差
2. 空间维压缩 - 将当前帧的残差作为图像进行压缩，又分为三步
   2.1 图像变换 - 一般用DCT或小波，目的是使变换后的数据尽可能小和稀疏，最好大部分都是0
   2.2 量化 - 这是整个过程中唯一有损的一步
   2.3 排序编码 - 将上一步的输出按某种规律重新排序，让大小接近的数据尽可能在一起，然后将(4,4,0,0,0,0,0)这样的序列表示为((4,2),(0,5))
3. 编码 - 将预测向量和压缩后的残差进行编码，这一步追求统计意义上的最优，不关注数据内容

其中的主要技术在下面的思维导图里：

实际的编解码步骤（图片来自参考书）：

参考：Iain E. G. Richardson: H.264 and MPEG-4 Video Compression