【H264/AVC 句法和语义详解】(一)：句法元素分层结构

参考：http://blog.csdn.net/ivy_reny/article/details/47144121
　　　http://blog.sina.com.cn/s/blog_4ad7c2540101me90.html

从这一篇开始，我们详细的讲解H.264/AVC 比特码流的句法和语义，可以说，能够学习并掌握H.264的句法和语义，是能彻底掌握并应用H.264的关键。在前面几篇文章中，我们只是从理论层面，介绍了H.264、片、宏块、帧内预测、帧间预测。而在句法和语义中，我们就可以拿到H.264编码之后的裸流，用理论加实践的方式，一步步探索H.264的编解码实现过程。

而在这篇文章里呢，我们就先从宏观的角度，来看看使用H.264编码之后，得到的裸流的分层结构是什么样的。

1. H264句法元素层次结构

1.1 以往标准句法元素的分层结构

在H.264以往标准句法中，句法元素被组织成六个层次：序列(sequence)层、图像组(gop)层、图像(frame/field-picture)层、片/条带(slice)层、宏块(macroblock)层、子块(sub-block)层。

上图就是在之前标准中的分层结构，可以看到句法元素同画面的划分一样，被组织成了有层次的结构，这种结构有助于更高效的节省码流。但是这样的结构，有几个很大的缺点：

（1）在这样的结构中，每一层的头部和它的数据部分形成管理与被管理的强依赖关系，头部的句法元素是该层数据的核心，而一旦头部丢失，数据部分的信息几乎不可能再被正确解码出来，尤其在序列层及图像层。

（2）在序列层及图像层，因为数据量过大，不可能将所有的句法元素一次传输，这时假如头部所在的分组丢失，那么该层其他的数据，即使能正确接收也无法解码。

（3）图像层内的各个片之间，经常会携带相同的数据，造成码流的浪费。

所以在此基础上，H.264取消了图像层和序列层，取而代之的，将原本属于图像层和序列层的大部分句法元素，抽取出来形成图像参数集和序列参数集，其余的部分，则放入片层。

1.2 H.264的句法元素的分层结构

下图为H.264图像参数集和序列参数集，与片中句法元素的关系：

H.264参数集与片中句法元素的关系

从图中可以看到，同一个序列参数集可以被多个序列中的图像参数集引用，同一个图像参数集也可以被多个图像引用。所以我们在打开H.264码流文件时会看到，序列参数集和图像参数集位于码流的最前面。如果编码器认为需要更新参数集时，会发送新的参数集。

在这