h.264 NAL单元分析

一、NAL单元简介

h.264编码分为两层：VCL(视频编码层)、NAL(网络提取层)。VCL层对源数据进行编码，NAL是对源数据进行封装，以适应网络传输的要求。h.264编码后生产的比特流，由一个个基本的NAL单元组成，NAL单元按照解码的顺序排列。具体形式如下图：

NAL header

RBSP

NAL header

RBSP

NAL header

RBSP

一个NAL单元分为NAL头和RBSP，NAL头说明了RBSP的类型，RBSP为原始字节序列载荷。

二、NAL单元分隔符

NAL单元以0x000001或0x00000001位分隔符。当在比特流中检测到0x000001或0x00000001时，后面的数据即为NAL单元，直到检测到下一个0x000001或0x00000001。为了防止编码后的数据中有0x000001或0x00000001而出现误判，需对编码后的数据进行处理。h.264采取的方式，是对检测到的0x0000，都在其后面添加0x03，这样在RBSP中就不会出现0x000001或0x00000001了。但是在NAL单元进行解析的时候，需要先对rbsp进行处理，把添加的0x03去除掉。

三、NAL 分析

对整个NAL单元进行解析，这里参考h.264标准7.3.1。

1、forbidden_zero_bit应为0

2、nal_ref_ide不等于0时，规定NAL单元的内容包含一个序列参数集，或一个图形参数集，或一个参考图形条带，或一个参考图形的条带数据分割。

  如果一个包含一个条带或条带数据分割的NAL单元的nal_ref_idc等于0时，该条带或条带数据分割是一个非参考图像的一部分。当一个条带或条带数据分割NAL单元的nal_ref_idc等于0，该图像的所有条带或条带数据划分NAL单元都应该等于0。

  IDR NAL单元的nal_ref_idc不应等于0，即nal_unit_type等于5的NAL单元。

  所有nal_unit_type等于6、9、10、11或12的NAL单元其nal_ref_idc都应等于0.

3、nal_unit_type

4、对RBSP进行处理，把添加的防竞争字节0x03去除。