ffmpeg常用结构体《精》

FFMpeg是当今为的面向音视频开发的开源工程，广泛应用于多种音视频的客户端、播放器和流媒体服务器中。使用FFMpeg提供的工具和SDK，可以完成音视频的编码、解码、转码、封装、解封装、转封装、视频水印和视频缩放等多种需求的开发。

掌握FFMpeg进行音视频开发，会使用FFpeg工具、SDK进行视频的编码、解码、转码、封装、解封等。

ffmpeg常用结构体《精》
1 解协议的作用，就是将流媒体协议的数据，解析为标准的相应的封装格式数据。视音频在网络上传播的时候，常常采用各种流媒体协议，例如HTTP，RTMP，或是MMS等等。这些协议在传输视音频数据的同时，也会传输一些信令数据。这些信令数据包括对播放的控制（播放，暂停，停止），或者对网络状态的描述等。解协议的过程中会去除掉信令数据而只保留视音频数据。例如，采用RTMP协议传输的数据，经过解协议操作后，输出FLV格式的数据。

2 解封装的作用，就是将输入的封装格式的数据，分离成为音频流压缩编码数据和视频流压缩编码数据。封装格式种类很多，例如MP4，MKV，RMVB，TS，FLV，AVI等等，它的作用就是将已经压缩编码的视频数据和音频数据按照一定的格式放到一起。例如，FLV格式的数据，经过解封装操作后，输出H.264编码的视频码流和AAC编码的音频码流。

3 解码的作用，就是将视频/音频压缩编码数据，解码成为非压缩的视频/音频原始数据。音频的压缩编码标准包含AAC，MP3，AC-3等等，视频的压缩编码标准则包含H.264，MPEG2，VC-1等等。解码是整个系统中最重要也是最复杂的一个环节。通过解码，压缩编码的视频数据输出成为非压缩的颜色数据，例如YUV420P，RGB等等；压缩编码的音频数据输出成为非压缩的音频抽样数据，例如PCM数据

4 视音频同步的作用，就是根据解封装模块处理过程中获取到的参数信息，同步解码出来的视频和音频数据，并将视频音频数据送至系统的显卡和声卡播放出来。

各大数据结构体之间的关系：

ffmpeg常用结构体《精》
结构体AVFormatContext

该结构体在avformat.h中，AVFormatContext主要存储视音频封装格式中包含的信息，包含编解码码流丰富的信息，统领全局的基本结构体，主要用于处理封装格式（FLV/MKV/RMVB等），由avformat_alloc_context()初始化，由avformat_free_context()销毁。如下：比较重要的成员已做注释

ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
uint8_t *dump_separator;

enum AVCodecID data_codec_id;

int (*open_cb)(struct AVFormatContext *s, AVIOContext **p, const char *url, int flags, const AVIOInterruptCB *int_cb, AVDictionary **options);

} AVFormatContext;

结构体AVFrame

该结构体在Frame.h中，AVFrame结构体一般用于存储原始数据（即非压缩数据，例如对视频来说是YUV，RGB，对音频来说是PCM），此外还包含了一些相关的信息。比如说，解码的时候存储了宏块类型表，QP表，运动矢量表等数据。编码的时候也存储了相关的数据。因此在使用FFMPEG进行码流分析的时候，AVFrame是一个很重要的结构体。由av_frame_alloc()或av_image_fill_arrays()初始化，由av_frame_free()销毁。如下：比较重要的成员已做注释

ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
data[]

对于packed格式的数据（例如RGB24），会存到data[0]里面。

对于planar格式的数据（例如YUV420P），则会分开成data[0]，data[1]，data[2]…（YUV420P中data[0]存Y，data[1]存U，data[2]存V）

qscale_table

QP表指向一块内存，里面存储的是每个宏块的QP值。宏块的标号是从左往右，一行一行的来的。每个宏块对应1个QP。

qscale_table[0]就是第1行第1列宏块的QP值；qscale_table[1]就是第1行第2列宏块的QP值；qscale_table[2]就是第1行第3列宏块的QP值。以此类推…

宏块的个数用下式计算：

注：宏块大小是16x16的。

每行宏块数：

ffmpeg常用结构体《精》
结构体AVCodecContext
该结构体在avcodec.h中，其成员及其多，AVCodecContext中很多的参数是编码的时候使用的，而不是解码的时候使用的。由avcodec_alloc_context3()初始化，对其中比较重要的已做注释：

ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
结构体AVIOContext
该结构体位于avio.h文件中，AVIOContext是FFMPEG管理输入输出数据的结构体，用于输入输出（读写文件，RTMP协议等）。该结构体由avio_alloc_context()初始化，一些成员已经做注释

ffmpeg常用结构体《精》
每一个编解码器对应一个AVCodec结构体，如H.264解码器的结构体定义：AVCodec ff_h264_decoder。

结构体AVStream

该结构体在avformat.h文件中，AVStream是存储每一个视频/音频流信息的结构体。由avformat_new_stream()初始化，

ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
ffmpeg常用结构体《精》
结构体AVPacket

该结构体在avcodec.h文件中，AVPacket存储压缩数据（视频对应H.264等码流数据，音频对应AAC/MP3等码流数据），由av_init_packet()或av_new_packet()初始化，av_free_packet()销毁。

av_init_packet()和av_new_packet()都不负责申请AVPacket结构体空间，而是申请一块给AVpacket的成员data指针指向的空间，该空间用于存储数据。而av_free_packet()也只是释放AVPacket的data成员指向的空间