H.264/ＡCC音视频编码流的RTP/RTSP传输实现（２）

H.264编码基本原理
　　为达到良好的编码效率及性能，H.264编码器采用的仍是变换和预测的混合编码法，其完整的编码过程如图所示。
　　在H.264编码标准中，输入的帧或场Fn是以宏块为单位进行处理的，采样后的视频图像都被分成16*16的宏块每个宏块包括1个亮度子块和2个8*8的色度子块。在分割宏块后，宏块按照相应次序进行编码器进行压缩编码。在H.264编码过程中，首先按照根据编码速率、编码质量等标准指定的算法，选择按照帧内编码或帧间预测编码的方法进行宏块压缩编码。
　　若采用帧内预测编码，其预测值 PRED（图中用P 表示）是由当前片中前面已编码的图像得到的；若采用帧间预测编码，则预测值PRED是由当前帧前后已编码的图像经过运动补偿得到的。其中参考图像用 F’n-1表示。为了提高预测精度，从而提高压缩比，实际的参考图像可在过去或未来（指显示次序上）已编码解码重建和滤波的帧中进行选择。
　　在通过相应算法得到当前宏块（子宏块）的预测值后，将预测值PRED 和当前宏块的色度或亮度值相减，产生一个残差块Dn，经宏块DCT变换、量化后将产生一组量化后的亮度或色度变换系数X，再经过熵编码过程，加上解码所需的一些信息（如预测模式量化参数、运动矢量等），将其一起组成一个压缩后的NAL码流，经NAL（网络自适应层）供传输和存储使用。如上所述，为了提供下一步预测要用的参考图像，编码器必须有重建图像的功能，对当前宏块进行重建。因此必须使残差图像经反量化、反DCT变换后得到的 Dn’与预测值P 相加，得到 uFn’（未经滤波的帧）。为了去除编码解码环路中产生的噪声，为了提高参考帧的图像质量以及提