Ffmpeg解析media容器过程:
1、调用av_read_frame函数
如果packet_buffer存在数据,根据pts返回AVPacket
如果packet_buffer不存在数据调用函数av_read_frame_internal
在ffmpeg中实现了将format格式的packet,最终转换成一帧帧的packet,并解析填充了packet的pts,dts,等信息,为最终解码提供了重要的数据,av_read_frame_internal,调用av_read_packet,每次只读取一个包,然后直到parser完这个包的所有数据,才开始读取下一个包,parser完的数据被保存在parser结构的数据缓冲中,这样即使av_read_packet读取的下一包和前一包的流不一样,由于parser也不一样,所以实现了av_read_frame_internal这个函数调用,可以解析出不同流的es流,而av_read_frame_internal函数除非出错否则必须解析出一帧数据才能返回
调用函数av_parser_parse2(***)分析出视频一帧(或音频若干帧)
2、ffmpeg对媒体容器格式封装在AVInputFormat结构体中,如:
AVInputFormat ff_w64_demuxer = {
"w64",
NULL_IF_CONFIG_SMALL("SonyWave64 format"),
sizeof(WAVContext),
w64_probe,
w64_read_header,
wav_read_packet,
NULL,
wav_read_seek,
.flags = AVFMT_GENERIC_INDEX,
.codec_tag = (const AVCodecTag*const []){ff_codec_wav_tags, 0},
};
对格式定义了read_header,read_packet,read_seek函数,来读数据
3)ffmpeg定义AVCodecParser用来对不同视频编码标准,分析出一个完整的一帧,如
AVCodecParser ff_h264_parser = {
{ CODEC_ID_H264 },
sizeof(H264Context),
init,
h264_parse,
close,
h264_split,
};
h.264的parser
4)h.264 decoder
AVCodec ff_h264_decoder = {
"h264",
AVMEDIA_TYPE_VIDEO,
CODEC_ID_H264,
sizeof(H264Context),
ff_h264_decode_init,
NULL,
ff_h264_decode_end,
decode_frame,
/*CODEC_CAP_DRAW_HORIZ_BAND |*/ CODEC_CAP_DR1 | CODEC_CAP_DELAY |
CODEC_CAP_FRAME_THREADS |
CODEC_CAP_SLICE_THREADS,
.flush= flush_dpb,
.long_name = NULL_IF_CONFIG_SMALL("H.264 / AVC / MPEG-4 AVC / MPEG-4 part 10"),
.init_thread_copy = ONLY_IF_THREADS_ENABLED(decode_init_thread_copy),
.update_thread_context = ONLY_IF_THREADS_ENABLED(decode_update_thread_context),
.profiles = NULL_IF_CONFIG_SMALL(profiles),
};