为了加深对Android Media框架的理解,决定在这里记录下学习过程中碰到的问题以及一些个人思考。由于本人水平有限,笔记的内容可能会有一些错误,如果看到也恳请指出。
ps. 这里的Media框架指的是Android媒体播放器、音视频编解码相关的内容。
下面是我绘制的简单的Android Media学习内容以及学习目标,主要包含以下几个部分:
- Media API & native wrapper:熟悉media api的调用方式及底层交互方式,熟悉java与native的串接方式,了解声明周期控制(构造与析构)
- MediaServer(media.player):了解媒体服务(binder service)的架构与提供的服务内容
- NuPlayer: 目标了player的实现
- Source & Extractor:了解demux组件与source的实现
- MediaCodec:了解编解码组件接口
- ACodec:了解编解码组件的工作流程
- OMX:了解编解码组件框架 (OpenMax)
- 最终目标:了解FFmpeg,尝试实现我们自己的Player,包含Source、Extractor、Decoder、JNI、JavaAPI五大部分
- CCodec:了解新的编解码组件的工作流程
开始学习前还有一些前备知识需要了解,包括智能指针、异步消息机制、以及binder框架,这三部分穿插于Android Media框架的各个角落,先了解他们会对看代码有些许帮助。我在学习Media框架之前已经提前学习了这部分的内容,也做了一些笔记,这里也贴出来让有需要的同学看看。
对于binder的学习可以不用很深入(我也不太会,笔记记录的乱起八糟),了解如何使用即可。这里也贴一个我的学习demo,比较复杂一点,但是更加贴近实际的使用:
学习过程中贴的代码来自于aospxref.com:
希望能更新到最后!加油!