MediaExtractor浅析

1. JAVA层

file: frameworks/base/media/java/android/media/MediaExtractor.java 
class: MediaExtractor

MediaExtractor上层接口。 
其中有3个调用JNI的接口：

    private static native final void native_init();
    private native final void native_setup();
    private native final void native_finalize();
   
   

2、JNI

file：frameworks/base/media/jni/android_media_MediaExtractor.cpp 
class：JMediaExtractor

此文件中除了JMediaExtractor类，还定义了一些Native的接口，主要有：

static void android_media_MediaExtractor_native_init(JNIEnv *env) 
static void android_media_MediaExtractor_release(JNIEnv *env, jobject thiz)
static void android_media_MediaExtractor_native_finalize(
        JNIEnv *env, jobject thiz) 
static void android_media_MediaExtractor_native_setup(
        JNIEnv *env, jobject thiz)
   
   

在JMediaExtractor中比较重要的是一个NuMediaExtractor成员，JMediaExtractor所有功能都是由NuMediaExtractor完成的。

3. NuMediaExtractor

file：frameworks/av/media/libstagefright/NuMediaExtractor.cpp 
class：NuMediaExtractor

NuMediaExtractor其地位和NuPlayer在MediaPlayer中的地位相当，类似一个引擎。 
其核心成员是：

    sp<DataSource> mDataSource;
    sp<MediaExtractor> mImpl;
   
   

其中mImpl指向具体的Extractor，它完成具体的extract工作。

4. MediaExtractor

file：frameworks/av/media/libstagefright/MediaExtractor.cpp 
class：MediaExtractor

MediaExtractor（C++）是MediaExtractor体系中核心，是各个extractor（eg.MPEG4Extractor）的父类，管理者. 
其中最重要的一个成员是一个函数指针：

typedef MediaExtractor *(*CreateFunc)(const sp<DataSource> &source,
             const char *mime, const sp<AMessage> &meta);
   
   

5. Extractor

以MPEG4Extractor为例： 
file：frameworks/av/media/libstagefright/MPEG4Extractor.cpp 
class：MPEG4Extractor

MPEG4Extractor继承MediaExtractor，实现对mp4的解析。

任何一个具体执行的Extractor都会定义一个Sniff**的函数用于外部调用接口，比如MPEG4Extractor的SniffMPEG4：

bool SniffMPEG4(
        const sp<DataSource> &source, String8 *mimeType, float *confidence,
        sp<AMessage> *);
   
   

6. 工作原理

MediaExtractor.setDataSource阶段会创建一个DataSource（参见NuMediaPlayer）， 
（1）Sniff阶段 
创建DataSource时会创建Sniffer类，在Sniffer中注册了各种Extractor的执行函数即Sniff**

void Sniffer::registerDefaultSniffers() {
    ....
    registerSniffer_l(SniffMPEG4);
    registerSniffer_l(SniffMatroska);
    registerSniffer_l(SniffOgg);
    registerSniffer_l(SniffWAV);
    registerSniffer_l(SniffFLAC);
    registerSniffer_l(SniffAMR);
    registerSniffer_l(SniffMPEG2TS);
    registerSniffer_l(SniffMP3);
    registerSniffer_l(SniffAAC);
    registerSniffer_l(SniffMPEG2PS);
    registerSniffer_l(SniffWVM);
    registerSniffer_l(ExtendedExtractor::Sniff);
    .....
}
   
   

实际上registerSniffer就是把Sniff××函数存入一个函数列表

    typedef bool (*SnifferFunc)(
            const sp<DataSource> &source, String8 *mimeType,
            float *confidence, sp<AMessage> *meta);
    List<SnifferFunc> mSniffers;
   
   

Sniff某个文件时会遍历执行mSniffers中注册的函数，执行结果中会有一个可信度（confidence）数值，然后从执行结果中选一个最大的可信度结果作为Sniff结果。

（2）Extractor::Create 
Create它根据文件的MIME信息创建对应的Extractor，具体逻辑如下： 
（1）sniff ： 获取文件meta信息 
（2）根据meta中的MIME创建对应的Extractor 
（3）ExtendedUtils判断创建默认Extractor还是扩展Extractor 
MediaExtractor_CreateIfNeeded的作用如其名就是判断是否需要启用ExtentedExtractor。 
（3） ExtentedExtractor 
如果看源代码的话会发现整个过程比较繁琐，下面说下启用ExtentedExtractor的原则，（如果需要深究还是仔细阅读源代码好了），原则如下： 
（1）尽量采用ExtentedExtractor 
因为DefaultExtractor是google的decoder，采用的是软解；ExtentedExtractor一般是厂商的decoder，通常采用硬解。 
（2）如果无法正确获取多媒体信息则采用ExtentedExtractor 
（3）如果没有找到DefaultExtractor则采用ExtentedExtractor 
（4）对于某些特殊格式采用ExtentedExtractor 
比如MPEG4格式，这个一般厂商都支持硬解。 
详细内容参考：Android MediaExtractor setDataSource

尊重作者，本文转自：http://blog.csdn.net/matrix_laboratory/article/details/48156099