H.264 基础及 RTP 封包详解

最新推荐文章于 2024-04-04 15:59:06 发布

voipmaker

最新推荐文章于 2024-04-04 15:59:06 发布

阅读量1.4w

点赞数 1

分类专栏： h264 文章标签： h.264 header video 网络 c

本文链接：https://blog.csdn.net/voipmaker/article/details/6633841

版权

本文详细介绍了H.264编码的基础概念，包括NAL、Slice和frame之间的关系，以及I、P、B帧的类型。同时，深入探讨了H.264在RTP封包中的格式，包括NALU头、RTP头的结构以及不同类型的打包模式，如单一NAL单元、组合封包和分片封包。此外，还提及了SDP参数在H.264流中的作用和常见参数设置。

摘要由CSDN通过智能技术生成

一. h264基础概念

1、NAL、Slice与frame意思及相互关系

1 frame的数据可以分为多个slice.
每个slice中的数据，在帧内预测只用到自己slice的数据，与其他slice 数据没有依赖关系。
NAL 是用来将编码的数据进行大包的。比如，每一个slice 数据可以放在NAL 包中。
I frame 是自己独立编码，不依赖于其他frame 数据。
P frame 依赖 I frame 数据。
B frame 依赖 I frame, P frame 或其他 B frame 数据。

一个frame是可以分割成多个Slice来编码的，而一个Slice编码之后被打包进一个NAL单元，不过NAL单元除了容纳Slice编码的码流外，还可以容纳其他数据，比如序列参数集SPS。

NAL指网络提取层，里面放一些与网络相关的信息
Slice是片的意思，264中把图像分成一帧（frame）或两场（field），而帧又可以分成一个或几个片（Slilce）；片由宏块（MB）组成。宏块是编码处理的基本单元。

2、NAL nal_unit_type中的1（非IDR图像的编码条带）、2（编码条带数据分割块A）、3（编码条带数据分割块B）、4（编码条带数据分割块C）、5（IDR图像的编码条带）种类型
与 Slice种的三种编码模式：I_slice、P_slice、B_slice
NAL nal_unit_type 里的五种类型，代表接下来数据是表示啥信息的和具体如何分块。
I_slice、P_slice、B_slice 表示I类型的片、P类型的片，B类型的片.其中I_slice为帧内预测模式编码；P_slice为单向预测编码或帧内模式；B_slice 中为双向预测或帧内模式。

3、还有frame的3种类型：I frame、P frame、 B frame之间有什么映射关系么？
I frame、P frame、 B frame关系同 I_slice、P_slice、B_slice，slice和frame区别在问题1中已经讲明白。

4、最后，NAL nal_unit_type中的6（SEI）、7（SPS）、8（PPS）属于什么帧呢？
NAL nal_unit_type 为序列参数集（SPS）、图像参数集（PPS）、增强信息（SEI）不属于啥帧的概念。表示后面的数据信息为序列参数集（SPS）、图像参数集（PPS）、增强信息（SEI）。