视频播放器底层框架解析

原创 2016年08月28日 21:10:36

存在问题:

说到视频编解码,就得谈谈ffmpeg有人说vlc很强大,但是你它的基础编解码也用ffmpeg。小伙伴们问什么是ffmpeg呀?


解决方案:

FFmpeg是相当强大的多媒体编解码框架,在深入分析其源代码之前必须要有基本的多媒体基础知识,否则其源代码会非常晦涩难懂。本文将从介绍一些基本的多媒体只是,主要是为研读ffmpeg源代码做准备,比如一些编解码部分,只有真正了解了多媒体处理的基本流程,研读ffmpeg源代码才能事半功倍。

下面分析一下多媒体中最基本最核心的视频解码过程,平常我们从网上下载一部电影或者一首歌曲,那么相应的多媒体播放器为我们做好了一切工作,我们只用欣赏就ok了。目前几乎所有的主流多媒体播放器都是基于开源多媒体框架ffmpeg来做的,可见ffmpeg的强大。下面是对一个媒体文件进行解码的主要流程:


1. 解复用(Demux)

当我们打开一个多媒体文件之后,第一步就是解复用,称之为Demux。为什么需要这一步,这一步究竟是做什么的?我们知道在一个多媒体文件中,既包括音频也包括视频,而且音频和视频都是分开进行压缩的,因为音频和视频的压缩算法不一样,既然压缩算法不一样,那么肯定解码也不一样,所以需要对音频和视频分别进行解码。虽然音频和视频是分开进行压缩的,但是为了传输过程的方便,将压缩过的音频和视频捆绑在一起进行传输。所以我们解码的第一步就是将这些绑在一起的音频和视频流分开来,也就是传说中的解复用,所以一句话,解复用这一步就是将文件中捆绑在一起的音频流和视频流分开来以方便后面分别对它们进行解码,下面是Demux之后的效果。



2. 解码(Decode)

这一步不用多说,一个多媒体文件肯定是经过某种或几种格式的压缩的,也就是通常所说的视频和音频编码,编码是为了减少数据量,否则的话对我们的存储设备是一个挑战,如果是流媒体的话对网络带宽也是一个几乎不可能完成的任务。所以我们必须对媒体信息进行尽可能的压缩。


3. FFmpeg中解码流程对应的API函数

了解了上面的一个媒体文件从打开到解码的流程,就可以很轻松的阅读ffmpeg代码,ffmpeg的框架也基本是按照这个流程来的,但不是每个流程对应一个API,下面这副图是我分析ffmpeg并根据自己的理解得到的ffmpeg解码流程对应的API,我想这幅图应该对理解ffmpeg和编解码有一些帮助。


Ffmpeg中Demux这一步是通过avformat_open_input()这个api来做的,这个api读出文件的头部信息,并做demux,在此之后我们就可以读取媒体文件中的音频和视频流,然后通过av_read_frame()从音频和视频流中读取出基本数据流packet,然后将packet送到avcodec_decode_video2()和相对应的api进行解码。

版权声明:本文为博主原创文章,未经博主允许不得转载。

相关文章推荐

Android视频框架 Vitamio 打造自己的万能播放器

转载地址:http://xfenglin.com/a/12007153515.html?ref=myread Vitamio 是一款 Android 与 iOS 平台上的全能多媒体开...

Android 视频播放器vitamio框架

项目简介:该项目为视频播放器,使用Vitamio框架完成。 vitamio框架下载地址:到这里去 另外,使用Android原生的VideoView播放视频请 参考 使用S...

对Android基于vitamio框架调用第三方播放器播放视频的初步认识

认识Vitamio Vitamio 是一款 Android 与 iOS 平台上的全能多媒体开发框架,全面支持硬件解码与 GPU 渲染。Vitamio 凭借其简洁易用的 API 接口赢得了全球众多...

利用Qt Phonon框架制作音视频播放器

Phonon严格来说其实非为Qt的library,Phonon原本就是KDE 4的开放源代码多媒体API,後来与Qt合并与开发,所以简单来说就是Qt使用Phonon这个多媒体框架来提供一般影音多媒体档...

Android视频框架 Vitamio 打造自己的万能播放器

itamio 是一款 Android 与 iOS 平台上的全能多媒体开发框架,全面支持硬件解码与 GPU 渲染。 Vitamio 功能强大,能够流畅播放720P甚至1080P高清MKV,FLV,...

使用 Kotlin 读取本地视频并使用Vitamio框架编写万能播放器进行播放(二)

#  使用 Kotlin 读取本地视频并使用Vitamio框架编写万能播放器进行播放(二)  # ## 一自定义一个VitamioVideoView ##     public class ...

Android平台下SeeJoPlayer视频播放器(功能介绍及源码解析,附源码)

转载请注明出处:http://www.blogjava.net/zh-weir/archive/2010/01/24/310617.html    2010.03.27    SeeJoPlayer ...

Android平台下SeeJoPlayer视频播放器(功能介绍及源码解析,附源码)

转载请注明出处:http://www.blogjava.net/zh-weir/archive/2010/01/24/310617.html     2010.03.27    SeeJoP...

Android平台下流媒体.视频播放器(功能介绍及源码解析,附源码) SeeJoPlayer

2010.03.27    SeeJoPlayer v1.2.0 beta版:        下载SeeJoPlayer v1.2.0 beta   ...

Android平台下SeeJoPlayer视频播放器(功能介绍及源码解析)

更新说明:    1、完美支持android1.5、android1.6、android2.0、android2.01、android2.1平台;     2、完美支持320×480、480×800...
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:深度学习:神经网络中的前向传播和反向传播算法推导
举报原因:
原因补充:

(最多只允许输入30个字)