关于Android多媒体框架（一）

Android最早采用的多媒体框架是OpenCore（PacketVideo）。

1. OpenCore概述

OpenCore的代码非常的庞大，它是一个基于C++的实现，定义了全功能的操作系统移植层，各种基本的功能均被封装成类的形式，各层次之间的接口多使用继承等方式。OpenCore是一个多媒体的框架，从宏观上来看，它主要包含了两大方面的内容：

* PVPlayer：提供媒体播放器的功能，完成各种音频（Audio）、视频（Video）流的回放（Playback）功能。

* PVAuthor：提供媒体流记录的功能，完成各种音频（Audio）、视频（Video）流的以及静态图像捕获功能。

PVPlayer和PVAuthor以SDK的形式提供给开发者，可以在这个SDK之上构建多种应用程序和服务。在移动终端中常常使用的多媒体应用程序，例如媒体播放器、照相机、录像机、录音机等等。

为了更好的组织整体的架构，OpenCore在软件层次在宏观上分成几个层次：

* OSCL：Operating System Compatibility Library(操作系统兼容库)，包含了一些操作系统底层的操作，为了更好地在不同操作系统移植。包含了基本数据类型、配置、字符串工具、IO、错误处理、线程等内容，类似一个基础的C++库。
* PVMF：PacketVideo Multimedia Framework（PV多媒体框架），在框架内实现一个文件解析（parser）和组成（composer）、编解码的NODE，也可以继承其通用的接口，在用户层实现一些NODE。
* PVPlayer Engine：PVPlayer引擎。
* PVAuthor Engine：PVAuthor引擎。

事实上，OpenCore中包含的内容非常多：从播放的角度，PVPlayer的输入的（Source）是文件或者网络媒体流，输出（Sink）是音频视频的输出设备，其基本功能包含了媒体流控制、文件解析、音频视频流的解码（Decode）等方面的内容。除了从文件中播放媒体文件之外，还包含了与网络相关的RTSP流（Real Time StreamProtocol,实时流协议）。在媒体流记录的方面，PVAuthor的输入的（Source）是照相机、麦克风等设备，输出（Sink）是各种文件，包含了流的同步、音频视频流的编码（Encode）以及文件的写入等功能。

在使用OpenCore的SDK的时候，有可能需要在应用程序层实现一个适配器（Adaptor），然后在适配器之上实现具体的功能，对于PVMF的NODE也可以基于通用的接口，在上层实现，以插件的形式使用。

2. OpenCore的代码结构

以开源Android的代码为例，OpenCore的代码在以下目录中：external/opencore/。这个目录是OpenCore的根目录，其中包含的子目录如下所示：

    * android：这里面是一个上层的库，它基于PVPlayer和PVAuthor的SDK实现了一个为Android使用的Player和Author。
    * baselibs：包含数据结构和线程安全等内容的底层库
    * codecs_v2：这是一个内容较多的库，主要包含编解码的实现，以及一个OpenMAX的实现
    * engines：包含PVPlayer和PVAuthor引擎的实现
    * extern_libs_v2：包含了khronos的OpenMAX的头文件
    * fileformats：文件格式的解析（parser）工具
    * nodes：提供一些PVMF的NODE，主要是编解码和文件解析方面的。
    * oscl：操作系统兼容库
    * pvmi： 输入输出控制的抽象接口
    * protocols：主要是与网络相关的RTSP、RTP、HTTP等协议的相关内容
    * pvcommon：pvcommon库文件的Android.mk文件，没有源文件。
    * pvplayer：pvplayer库文件的Android.mk文件，没有源文件。
    * pvauthor：pvauthor库文件的Android.mk文件，没有源文件。
    * tools_v2：编译工具以及一些可注册的模块。

    在external/opencore/目录中还有2个文件，如下所示：

    * Android.mk：全局的编译文件
    * pvplayer.conf：配置文件

    在external/opencore/的各个子文件夹中包含了众多的Android.mk文件，它们之间还存在着“递归”的关系。例如根目录下的Android.mk，就包含了如下的内容片断：
include $(PV_TOP)/pvcommon/Android.mk
include $(PV_TOP)/pvplayer/Android.mk
include $(PV_TOP)/pvauthor/Android.mk
    这表示了要引用pvcommon，pvplayer和pvauthor等文件夹下面的Android.mk文件。
external/opencore/的各个Android.mk文件可以按照排列组合进行使用，将几个Android.mk内容合并在一个库当中。

库的层次关系：在Android的开源版本中编译出来的内容，OpenCore编译出来的各个库如下所示：

    * libopencoreauthor.so：OpenCore的Author库
    * libopencorecommon.so：OpenCore底层的公共库
    * libopencoredownloadreg.so ：下载注册库
    * libopencoredownload.so：下载功能实现库
    * libopencoremp4reg.so：MP4注册库
    * libopencoremp4.so：MP4功能实现库
    * libopencorenet_support.so：网络支持库
    * libopencoreplayer.so：OpenCore的Player库
    * libopencorertspreg.so：RTSP注册库
    * libopencorertsp.so：RTSP功能实现库