ffmpeg模块以及播放视频调用关系

最新推荐文章于 2024-07-11 18:00:41 发布
最新推荐文章于 2024-07-11 18:00:41 发布
阅读量629 收藏
点赞数
分类专栏： 音视频编解码
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/btchengzi0/article/details/79010371
版权

一、目的

本文旨在阐述ffmpeg模块的作用以及播放视频调用的关系，方便查找使用ffmpeg播放视频时问题所在。

二、模块作用以及主要数据结构

module
 |-libavcodec: 音视频格式编解码器(audio/video encoder/decoder)
 |  |-AVCodecContext: 编解码上下文，如比特率、编码ID、类型（音/视）、类型特定信息(视频：算法、宽高、视频组大小、像素格式、Q值、b帧等，音频：采样率、通道数、采样格式等）
 |     |-AVCodec: 编解码实现函数
 |     |-AVClass: 类信息，如类名，类选项，log时可用
 |-libavformat: 音视频封装格式的生成和解析，包括获取解码所需信息以及生成解码上下文结构和读取音视频帧功能(muxer/demuxer)
 |  |-AVFormatContext: 文件上下文、流、包列表
 |     |-AVClass: 类信息，如类名，类选项，log时可用
 |     |-AVInputFormat: 输入函数指针
 |     |-AVOutputFormat:输出函数指针
 |     |-AVStream: 音视频流信息
 |        |-AVCodecContext: 引用编解码器，参考module->libavcodec->AVCodecContext
 |-libavutil: 公共的工具函数，如内存操作和CRC整数算法之类的
 |-libavdevice: 对输入输出设备的支持
 |-libpostproc: 对后期效果的处理
 |-libswscale: 视频缩放和颜色映射转换
 |-libavcore: 操作一些很裸的东西，没数据结构的，如av_image_fill_linesizes、av_image_fill_pointers、av_image_alloc之类，直接操作数组

三、播放视频调用关系以及作用

app
 |-ffserver: http多媒体广播串流服务
 |-ffplay： 使用SDL的播放器
 |  |-av_register_all(libavformat\allformats.c): 注册所有编码器、混编器（REGISTER_MUXER(libavformat/x##enc.c的x_muxer)、REGISTER_DEMUXER(libavformat/x##dec.c的x_demuxer))、REGISTER_PROTOCOL(libavformat/x##.c的x##_protocol)
 |  |  |-av_register_output_format(libavformat\utils.c):放进first_oformat这个链表里
 |  |  |-av_register_input_format(libavformat\utils.c):放进first_iformat这个链表里
 |  |  |-av_register_protocol2（libavformat\avio.c）:放进first_protocol这个链表里
 |  |  |-avcodec_register_all(libavcodec\allcodecs.c):REGISTER_ENCDEC(libavcodec/x##enc.c的x##_encoder) REGISTER_DECODER(libavcodec/x##dec.c的x##_decoder) REGISTER_HWACCEL REGISTER_PARSER(libavcodec\x##_parser.c的x##_parser)
 |  |     |-avcodec_register(libavcodec\utils.c): 放进first_avcodec这个链表里
 |  |     |-av_register_codec_parser(libavcodec\parser.c): 放进av_first_parser这个链表里
 |  |-avformat_alloc_context(libavformat\options.c):分配AVFormatContext内存，设置类信息(缺省值以及Log用)
 |  |-av_open_input_file(libavformat\utils.c): 打开文件，将文件头信息填入AVFormatContext结构体
 |  |  |-av_probe_input_format（libavformat\utils.c):查找最合适的输入格式
 |  |  |  |-av_iformat_next（libavformat\utils.c): 遍历first_iformat这个链表
 |  |  |  |-AVInputFormat::read_probe(libavformat\x##dec.c)/av_match_ext（libavformat\utils.c):计算匹配程度
 |  |  |-url_fopen(libavformat\aviobuf.c): 打开URL或文件
 |  |  |  |-url_open(libavformat\avio.c): 
 |  |  |  |  |-url_alloc(libavformat\avio.c): 从first_protocol链表里查找匹配的协议并分配内存和初始化
 |  |  |  |  |  |-url_alloc_for_protocol(libavformat\avio.c): 分配内存初始化并将匹配的协议填到结构体里面
 |  |  |  |  |-url_connect(libavformat\avio.c): 调用协议结构体里的url_open
 |  |  |  |-url_fdopen(libavformat\aviobuf.c): 分配内存ByteIOContext，分配包缓冲区，填充URLContext的部分信息到ByteIOContext(读写、seek、pause)
 |  |  |-ff_probe_input_buffer(如无匹配format)(libavformat\utils.c): 匹配内容
 |  |  |  |-get_buffer(libavformat\aviobuf.c): 读取一个包内容
 |  |  |  |-av_probe_input_format2(libavformat\utils.c):查找最合适的输入格式  
 |  |  |-av_open_input_stream(libavformat\utils.c):填充ByteIOContext和AVInputFormat进AVFormatContext，读取标签和头部信息AVInputFormat::read_header
 |  |     |-ff_id3v2_read(libavformat\id3v2.c): 读取（如有）并解析ID3标签
 |  |-av_find_stream_info(libavformat\utils.c): 获取编码器信息，包括时长、宽高、帧率
 |  |  |-av_parser_init(libavcodec\parser.c): 在av_first_parser里查找id对应的的AVCodecParser，分配AVCodecParserContext内存并设置成员，调用AVCodecParser::parser_init
 |  |  |-avcodec_open(libavcodec\utils.c): 将编码器私有信息拷到编码器上下文里，设置编码器上下文的编码器、类型和编码器id，调用具体编码器的init函数
 |  |  |-av_read_frame_internal(libavformat\utils.c):读取一个包
 |  |  |-avcodec_decode_video2/avcodec_decode_audio3(libavcodec\utils.c): 调用AVCodec::decode解码，或许能填充信息
 |  |  |-avcodec_close(libavcodec\utils.c): 关闭编码器
 |  |-avformat_seek_file(如果需要从某个时间点开始播放)(libavformat\utils.c):跳到某个时间点(us)
 |  |-avcodec_find_decoder(libavcodec\utils.c): 从first_avcodec里面查找id匹配的返回
 |  |-av_set_string3(libavutil\opt.c): 设置编解码器特定选项
 |  |-avcodec_open(libavcodec\utils.c): 将编码器私有信息拷到编码器上下文里，设置编码器上下文的编码器、类型和编码器id，调用具体编码器的init函数。
 |  |-av_init_packet(libavcodec\avpacket.c): 初始化临时包
 |  |-av_read_frame(libavformat\utils.c): 读取一个包（如有需要，则在读完后生成pts才返回）
 |  |  |-av_read_frame_internal(libavformat\utils.c)
 |  |     |-av_init_packet(libavcodec\avpacket.c): 初始化临时包
 |  |     |-av_read_packet(libavformat\utils.c): 读取一个包
 |  |     |  |-AVInputFormat::read_packet(libavformat\x##dec.c):读取一个包
 |  |     |-av_parser_parse2(libavcodec\parser.c): 解析包内容
 |  |-avcodec_decode_video2(libavcodec\utils.c): 解码视频包
 |  |  |-av_image_check_size(libavcore\imgutils.c):检查宽高是否合法
 |  |  |-AVCodecContext::AVCodec::decode(libavcodec\*dec.c):调用注册解码器时的结构体函数，如mpeg4videodec.c里面结构体里面其实是引用了libavcodec\h263dec.c的函数ff_h263_decode_frame
 |  |-avcodec_close(libavcodec\utils.c): 关闭解码器
 |     |-avcodec_thread_free(libavcodec\pthread.c):调用pthread_mutex_lock、pthread_cond_broadcast、pthread_mutex_unlock通知线程结束，pthread_join等待线程结束，pthread_mutex_destroy、pthread_cond_destroy销毁资源，av_freep(&avctx->thread_opaque)释放线程上下文
 |     |-AVCodecContext::AVCodec::close(libavcodec\*dec.c):调用注册解码器中的函数
 |     |-avcodec_default_free_buffers(libavcodec\utils.c):释放内部缓存
 |     |-av_freep(libavutil\mem.c): 释放私有数据

btchengzi0
关注
专栏目录
FFmpeg播放视频流程详解
程序猿老樊的博客
11-30 2788
利用FFmpeg播放视频需要理解视频播放的基本流程，包括初始化FFmpeg, 打开视频文件, 查找视频流, 解码视频流, 以及转换和渲染视频帧。通过本文的介绍和代码示例，大家应该能够开始使用FFmpeg进行基本的视频播放开发。请注意，为了让代码示例尽可能简洁，本文没有包括错误处理和内存管理的全部细节。在生产环境中，应该始终对所有可能的错误情况进行检查，并且确保及时释放所有分配的资源。此外，对于复杂的应用场景，可能需要考虑多线程或异步处理，以及音视频同步等问题。
ffmpeg播放视频
C1C1__的博客
01-16 1033
获取RGB32像素数据: 像素数据后的格式:AV_PIX_FMT_RGB32 //6.读取每帧画面 //AVPacket 保存每一帧的画面 AVPacket *pkt=nullptr; //开空间 pkt=(AVPacket*)malloc(sizeof(AVPacket)); //一帧大小 int OnePicsize=av_codec_Context->width*av_codec_Context->height; //开空间
ffmpeg音频文件的读取播放代码流程
dga332042926的博客
07-11 358
通过以上步骤，您应该能够编写一个简单的音频播放器，并了解每个步骤的基本原理。如果遇到特定问题，可以针对该问题进行深入研究和调试。从音频文件中读取音频数据并将其发送到PortAudio进行播放。PortAudio是一个跨平台的音频I/O库，用于处理音频流。用于确保FFmpeg的C库能够在C++中正确链接。使用FFmpeg的函数打开音频文件并读取文件信息。设置PortAudio的音频流参数，并打开音频流。引入FFmpeg和PortAudio的头文件。在文件中查找音频流，并找到与之匹配的解码器。
FFmpeg入门 - 视频播放
yinshipin007的博客
03-03 1271
其实AVFrame在使用完成之后也需要使用av_frame_unref去释放AVFrame的像画面素数据,但是在avcodec_receive_frame内会调用av_frame_unref将上一帧的内存清除,而最后一帧的数据也会在Release的时候被av_frame_free清除,所以我们不需要手动调用av_frame_unref.由于视频压缩帧存在i帧、b帧、p帧这些类型,并不是每种帧都可以直接解码出原始画面,b帧是双向差别帧，也就是说b帧记录的是本帧与前后帧的差别,还需要后面的帧才能解码.
FFMPEG 之视频播放
万小凡的专栏
12-13 7776
先看界面效果，虽然有点low，但是效果实现了 一、实现原理 1、使用ffmpeg解码视频 2、然后使用libyuv播放解码的视频 二、实现 1、先看目录结构 2、ffmpeg编译以及引用，在之前的篇章已经说过了，不知道得可以看看之前的文章 3、编译libyuv       1、首先在https://chromium.googlesource.com/external/lib
FFmpeg解码并播放视频
10-11
在Android ndk中使用FFmpeg解码并播放视频，全部是自己手写的，完全可用。如有问题大家多沟通交流。
ffmpeg 【全网最全命令易语言视频处理模块】
11-22
【记得初始化否则调用失败】.ec 已经封装成模块。
调用FFmpeg合并视频命令模块源码-易语言
06-11
本模块源码是利用FFmpeg库实现视频合并功能的一个易语言程序，适合对FFmpeg感兴趣或需要进行视频处理的开发者学习。 在易语言中调用FFmpeg进行视频合并，主要涉及到以下几个步骤： 1. **初始化FFmpeg环境**：首先...
QT + ffmpeg 播放 rtsp,rtmp,udp视频流
08-05
QT + ffmpeg 播放 RTSP, RTMP, UDP 视频流是一个常见的技术应用场景，尤其是在多媒体开发领域。本文将详细介绍如何使用QT结合ffmpeg库来实现这些不同类型的视频流播放。 首先，QT（Qt）是一个跨平台的应用程序开发...
FFmpeg易语言应用例程
06-03
在FFmpeg易语言应用例程中，开发者可以学习如何在易语言环境下调用FFmpeg的API，实现如视频截取、音频提取、格式转换等常见任务。这通常涉及以下几个核心知识点： 1. FFmpeg API接口：FFmpeg提供了丰富的C语言API，...
ffmpeg实现视频播放
04-26
利用ffmpeg解码，进行视频播放，界面由QT实现
利用ffmpeg实现最简单的视频播放功能
BIGBurning
11-12 3647
还是直接上代码：
ffmpeg解析视频帧并保存为bmp图像
小米的修行之路
06-08 1510
使用ffmpeg解析视频帧，将解析后的帧数据保存为bmp图片
自学FFmpeg播放视频
心宽何处不桃源
12-26 421
总思路 1.lock window 2.缓冲区赋值 3.unlock window 和FFmpeg转码一样 导入对应的头文件和so库 1）新建VideoView public class VideoView extends SurfaceView { public VideoView(Context context) {
ffmpeg播放器（一） 视频解码与播放
weixin_58308529的博客
09-27 2433
视频解码与播放
【android】ffmpeg实现播放视频
m0_63553765的博客
05-14 428
实现ffmpeg的视频解码转为yuv和rgba，并用rgba进行输出。
【FFmpeg】ffplay 播放视频命令 ( 播放 | 暂停 | 停止 | 音量控制 | 进度控制 | 音频流 / 视频流 / 字幕流 / 节目切换 )
热门推荐
让 学习 成为一种 习惯 ( 韩曙亮 の 技术博客 )
06-14 2万+
一、使用 ffplay 播放视频的基本命令、 二、ffplay 播放过程中的控制命令、 三、测试 TS 流循环切换 音频流/视频流/字幕流/节目、
FFmpeg 简单的视频播放例子(Qt)
Genven_Liang的博客
05-08 9786
FFmpeg 简单使用例子(Qt) 一、简述 记--直接在FFmpeg官网下载已经编译好的库(也可以自己用源码编译)，并在Qt程序中引用并使用。 例子1： 例子2： FFmpeg库： 二、下载FFmpeg库(也可以自己用源码编译)...
3. FFmpeg：解码视频API调用流程
最新发布
09-11
FFmpeg是一个强大的跨平台多媒体框架，它支持广泛的音频和视频文件处理，包括编码、解码、流媒体转换等。对于解码视频API的调用流程，通常分为以下几个步骤： 1. **初始化 FFmpeg**：首先需要包含FFmpeg库，并创建一个`avformat_context`结构体实例，这是FFmpeg的核心结构，用于存储解码器上下文信息。 ```c av_register_all(); avformat_network_init(); // 初始化网络模块 avformat_instance = avformat_alloc_context(); ``` 2. **打开输入文件**：通过`avformat_open_input`函数指定要解码的文件路径，并设置`avformat_instance`。 ```c if (avformat_open_input(&avformat_instance, input_filename, NULL, NULL) < 0) { // 处理错误 } ``` 3. **查找并注册解析器**：调用`avformat_find_stream_info`来获取文件的元数据，并自动注册相关的解析器。 ```c if (avformat_find_stream_info(avformat_instance, NULL) < 0) { // 处理错误 } ``` 4. **选择视频流**：遍历`avformat_instance->streams`，找到视频流并获取解码器上下文`avcodec_context`。 ```c for (int i = 0; i < avformat_instance->nb_streams; ++i) { if (avstream_is_video(avformat_instance->streams[i])) { video_codec_ctx = avformat_get.stream(i)->codec; break; } } ``` 5. **分配解码器和帧缓冲区**：初始化解码器并分配内存缓冲区用于存放解码后的像素数据。 ```c if (avcodec_open2(video_codec_ctx, avcodec_find_decoder(video_codec_ctx->codec_id), NULL) < 0) { // 处理错误 } frame = av_frame_alloc(); ``` 6. **解码视频帧**：调用`avcodec_decode_video2`函数，提供输入缓冲区和输出缓冲区，直到返回错误或者达到文件结束。 7. **播放/处理解码后的帧**：循环解码，可以对解码后的帧进行显示、分析或者其他操作。 8. **释放资源**：解码完成后，记得关闭解码器、释放帧，以及清理FFmpeg的其他资源。 ```c avcodec_close(video_codec_ctx); av_frame_free(&frame); avformat_close_input(&avformat_instance); ```
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值