今天刚好看视频直播的rtmp-flv-h264-aac这种流的解析,用ffplay跑了一下,流程如下:
main()
1 打开文件、探测媒体类型。
--is = stream_open(input_filename, file_iformat);
2 event_loop: 一个for循环,可以当做主线程,里面处理各种消息,这个for循环退出后,整个ffplay结束。最新的代码中,刷新的线程refresh_loop_wait_event也放在event_loop中。
--event_loop(is);
1. stream_open只做一件事:创建读线程,打开文件和探测媒体类型都是在这个读线程完成的
is->read_tid = SDL_CreateThread(read_thread, is);
1. read_thread
//创建上下文结构体,这个结构体是最上层的结构体,表示输入上下文
AVFormatContext *ic = NULL;
ic = avformat_alloc_context();
//设置中断函数,其实就是如果出错了或者退出了,就可以立刻退出,其实就是一个标示
ic->interrupt_callback.callback = decode_interrupt_cb;
ic->interrupt_callback.opaque = is;
1.1 打开这个文件,主要探测协议类型、如果是网络文件则创建网络连接等。
err = avformat_open_input(&ic, is->filename, is->iformat, &format_opts);
is->ic = ic;
1.2 探测媒体类型
err = avformat_find_stream_info(ic, opts);
1.3 如果设置了播放起始点,则先做seek
if (start_time != AV_NOPTS_VALUE) {
ret = avformat_seek_file(ic, -1, INT64_MIN, timestamp, INT64_MAX, 0);
}
1.4 找到视频、音频和字幕最匹配的流
st_index[AVMEDIA_TYPE_VIDEO] =
av_find_best_stream(ic, AVMEDIA_TYPE_VIDEO,
st_index[AVMEDIA_TYPE_VIDEO], -1, NULL, 0);
1.5 打开视频、音频和字幕流。视频则创建video_thread线程负责视频解码;音频则创建audio_thread线程负责音频解码。
stream_component_open(is, st_index[AVMEDIA_TYPE_AUDIO]);
1.6 接着进入一个for循环,连续的从socket或者本地视频流中读出流按照包的形式放在缓冲区中,这里的缓冲区有三个队列,分布是视频队列、音频队列和字幕队列。如果碰到拖动,则进入seek查找,将缓冲区的包都清空。另外3个线程video_thread,audio_thread,subtitle_thread主要负责从这个缓冲区中读取包,去解析。
1.7 如果播放完毕,则发送exit消息给上面的event_loop,做退出处理。
event.type = FF_QUIT_EVENT;
event.user.data1 = is;
SDL_PushEvent(&event);
3,video_thread:视频解码线程,不断地从read_thread按包存的缓冲区中读取视频包解码。
4,audio_thread:音频解码线程,不断的从read_thread按包存的缓冲区中读取音频包解码。
5,subtitle_thread:字幕解码线程,不断的从read_thread按包存的缓冲区中读取字幕包解码。
6,refresh_loop_wait_event:将video_thread解析后的yuv送去显示。
后面就把每一节进行详细分析。