ijkplayer源码---FFPlayer结构体5 IJKFF_Pipeline

已于 2022-03-07 15:22:44 修改
阅读量5.2k 收藏
点赞数
分类专栏： ijkPlayer 文章标签： ffmpeg ijkplayer 音视频
于 2022-03-07 15:22:14 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_15255121/article/details/123280252
版权

ijkplayer源代码文章索引_qq_15255121的专栏-CSDN博客

struct IJKFF_Pipeline *pipeline;

struct IJKFF_Pipeline {
    SDL_Class             *opaque_class;
    IJKFF_Pipeline_Opaque *opaque;

    void            (*func_destroy)             (IJKFF_Pipeline *pipeline);
    IJKFF_Pipenode *(*func_open_video_decoder)  (IJKFF_Pipeline *pipeline, FFPlayer *ffp);
    SDL_Aout       *(*func_open_audio_output)   (IJKFF_Pipeline *pipeline, FFPlayer *ffp);
    IJKFF_Pipenode *(*func_init_video_decoder)  (IJKFF_Pipeline *pipeline, FFPlayer *ffp);
    int           (*func_config_video_decoder)  (IJKFF_Pipeline *pipeline, FFPlayer *ffp);
};

opaque_class

我们先看下   SDL_Class             *opaque_class;

我们看到

static SDL_Class g_pipeline_class = {
    .name = "ffpipeline_android_media",
};

IJKFF_Pipeline *ffpipeline_create_from_android(FFPlayer *ffp)
{
    ALOGD("ffpipeline_create_from_android()\n");
    IJKFF_Pipeline *pipeline = ffpipeline_alloc(&g_pipeline_class, sizeof(IJKFF_Pipeline_Opaque));
    if (!pipeline)
        return pipeline;

    IJKFF_Pipeline_Opaque *opaque = pipeline->opaque;
    opaque->ffp                   = ffp;
    opaque->surface_mutex         = SDL_CreateMutex();
    opaque->left_volume           = 1.0f;
    opaque->right_volume          = 1.0f;
    if (!opaque->surface_mutex) {
        ALOGE("ffpipeline-android:create SDL_CreateMutex failed\n");
        goto fail;
    }

    pipeline->func_destroy              = func_destroy;
    pipeline->func_open_video_decoder   = func_open_video_decoder;
    pipeline->func_open_audio_output    = func_open_audio_output;
    pipeline->func_init_video_decoder   = func_init_video_decoder;
    pipeline->func_config_video_decoder = func_config_video_decoder;

    return pipeline;
fail:
    ffpipeline_free_p(&pipeline);
    return NULL;
}


IJKFF_Pipeline *ffpipeline_alloc(SDL_Class *opaque_class, size_t opaque_size)
{
    IJKFF_Pipeline *pipeline = (IJKFF_Pipeline*) calloc(1, sizeof(IJKFF_Pipeline));
    if (!pipeline)
        return NULL;

    pipeline->opaque_class = opaque_class;
    pipeline->opaque       = calloc(1, opaque_size);
    if (!pipeline->opaque) {
        free(pipeline);
        return NULL;
    }

    return pipeline;
}

可以知道是ffpipeline_android_media

IJKFF_Pipeline_Opaque

IJKFF_Pipeline_Opaque *opaque;

typedef struct IJKFF_Pipeline_Opaque {
    FFPlayer      *ffp; //最上层的FFPlayer
    SDL_mutex     *surface_mutex; //surface锁
    jobject        jsurface; //surface 
    volatile bool  is_surface_need_reconfigure;//是否需要重新设置

    bool         (*mediacodec_select_callback)(void *opaque, ijkmp_mediacodecinfo_context *mcc);
    void          *mediacodec_select_callback_opaque;

    SDL_Vout      *weak_vout; //视频输出 弱引用

    float          left_volume; //最小音量
    float          right_volume; //最高音量
} IJKFF_Pipeline_Opaque;

mediacodec_select_callback是什么呢？

static void
IjkMediaPlayer_native_setup(JNIEnv *env, jobject thiz, jobject weak_this)
{
    MPTRACE("%s\n", __func__);
    IjkMediaPlayer *mp = ijkmp_android_create(message_loop);
    JNI_CHECK_GOTO(mp, env, "java/lang/OutOfMemoryError", "mpjni: native_setup: ijkmp_create() failed", LABEL_RETURN);

    jni_set_media_player(env, thiz, mp);
    ijkmp_set_weak_thiz(mp, (*env)->NewGlobalRef(env, weak_this));
    ijkmp_set_inject_opaque(mp, ijkmp_get_weak_thiz(mp));
    ijkmp_set_ijkio_inject_opaque(mp, ijkmp_get_weak_thiz(mp));
    ijkmp_android_set_mediacodec_select_callback(mp, mediacodec_select_callback, ijkmp_get_weak_thiz(mp));

LABEL_RETURN:
    ijkmp_dec_ref_p(&mp);
}


void ijkmp_android_set_mediacodec_select_callback(IjkMediaPlayer *mp, bool (*callback)(void *opaque, ijkmp_mediacodecinfo_context *mcc), void *opaque)
{
    if (!mp)
        return;

    MPTRACE("ijkmp_android_set_mediacodec_select_callback()");
    pthread_mutex_lock(&mp->mutex);

    if (mp && mp->ffplayer && mp->ffplayer->pipeline) {
        ffpipeline_set_mediacodec_select_callback(mp->ffplayer->pipeline, callback, opaque);
    }

    pthread_mutex_unlock(&mp->mutex);
    MPTRACE("ijkmp_android_set_mediacodec_select_callback()=void");
}


void ffpipeline_set_mediacodec_select_callback(IJKFF_Pipeline* pipeline, bool (*callback)(void *opaque, ijkmp_mediacodecinfo_context *mcc), void *opaque)
{
    ALOGD("%s\n", __func__);
    if (!check_ffpipeline(pipeline, __func__))
        return;

    pipeline->opaque->mediacodec_select_callback        = callback;
    pipeline->opaque->mediacodec_select_callback_opaque = opaque;
}

我们看到mediacodec_select_callback是ijkplayer/android/ijkplayer_jni.c中的

static bool mediacodec_select_callback(void *opaque, ijkmp_mediacodecinfo_context *mcc)
{
    JNIEnv *env = NULL;
    jobject weak_this = (jobject) opaque;
    const char *found_codec_name = NULL;

    if (JNI_OK != SDL_JNI_SetupThreadEnv(&env)) {
        ALOGE("%s: SetupThreadEnv failed\n", __func__);
        return -1;
    }

    found_codec_name = J4AC_IjkMediaPlayer__onSelectCodec__withCString__asCBuffer(env, weak_this, mcc->mime_type, mcc->profile, mcc->level, mcc->codec_name, sizeof(mcc->codec_name));
    if (J4A_ExceptionCheck__catchAll(env) || !found_codec_name) {
        ALOGE("%s: onSelectCodec failed\n", __func__);
        goto fail;
    }

fail:
    return found_codec_name;
}

通过上面代码可以知道最后调用了IjkMediaPlayer.java的

@CalledByNative
private static String onSelectCodec(Object weakThiz, String mimeType, int profile, int level) {
    if (weakThiz == null || !(weakThiz instanceof WeakReference<?>))
        return null;

    @SuppressWarnings("unchecked")
    WeakReference<IjkMediaPlayer> weakPlayer = (WeakReference<IjkMediaPlayer>) weakThiz;
    IjkMediaPlayer player = weakPlayer.get();
    if (player == null)
        return null;

    OnMediaCodecSelectListener listener = player.mOnMediaCodecSelectListener;
    if (listener == null)
        listener = DefaultMediaCodecSelector.sInstance;

    return listener.onMediaCodecSelect(player, mimeType, profile, level);
}




public static class DefaultMediaCodecSelector implements OnMediaCodecSelectListener {
    public static final DefaultMediaCodecSelector sInstance = new DefaultMediaCodecSelector();

    @SuppressWarnings("deprecation")
    @TargetApi(Build.VERSION_CODES.JELLY_BEAN)
    public String onMediaCodecSelect(IMediaPlayer mp, String mimeType, int profile, int level) {
        if (Build.VERSION.SDK_INT < Build.VERSION_CODES.JELLY_BEAN)
            return null;

        if (TextUtils.isEmpty(mimeType))
            return null;

        Log.i(TAG, String.format(Locale.US, "onSelectCodec: mime=%s, profile=%d, level=%d", mimeType, profile, level));
        ArrayList<IjkMediaCodecInfo> candidateCodecList = new ArrayList<IjkMediaCodecInfo>();
        int numCodecs = MediaCodecList.getCodecCount();
        for (int i = 0; i < numCodecs; i++) {
            MediaCodecInfo codecInfo = MediaCodecList.getCodecInfoAt(i);
            Log.d(TAG, String.format(Locale.US, "  found codec: %s", codecInfo.getName()));
            if (codecInfo.isEncoder())
                continue;

            String[] types = codecInfo.getSupportedTypes();
            if (types == null)
                continue;

            for(String type: types) {
                if (TextUtils.isEmpty(type))
                    continue;

                Log.d(TAG, String.format(Locale.US, "    mime: %s", type));
                if (!type.equalsIgnoreCase(mimeType))
                    continue;

                IjkMediaCodecInfo candidate = IjkMediaCodecInfo.setupCandidate(codecInfo, mimeType);
                if (candidate == null)
                    continue;

                candidateCodecList.add(candidate);
                Log.i(TAG, String.format(Locale.US, "candidate codec: %s rank=%d", codecInfo.getName(), candidate.mRank));
                candidate.dumpProfileLevels(mimeType);
            }
        }

        if (candidateCodecList.isEmpty()) {
            return null;
        }

        IjkMediaCodecInfo bestCodec = candidateCodecList.get(0);

        for (IjkMediaCodecInfo codec : candidateCodecList) {
            if (codec.mRank > bestCodec.mRank) {
                bestCodec = codec;
            }
        }

        if (bestCodec.mRank < IjkMediaCodecInfo.RANK_LAST_CHANCE) {
            Log.w(TAG, String.format(Locale.US, "unaccetable codec: %s", bestCodec.mCodecInfo.getName()));
            return null;
        }

        Log.i(TAG, String.format(Locale.US, "selected codec: %s rank=%d", bestCodec.mCodecInfo.getName(), bestCodec.mRank));
        return bestCodec.mCodecInfo.getName();
    }
}

返回的是解码器的名字，进而最后如果有名字返回true，没名字返回false。

    ijkmp_android_set_mediacodec_select_callback(mp, mediacodec_select_callback, ijkmp_get_weak_thiz(mp));

这句话同时告诉我们mediacodec_select_callback_opaque是java层的

IjkMediaPlayer

func_init_video_decoder

static IJKFF_Pipenode *func_init_video_decoder(IJKFF_Pipeline *pipeline, FFPlayer *ffp)
{
    IJKFF_Pipeline_Opaque *opaque = pipeline->opaque;
    IJKFF_Pipenode        *node = NULL;

    if (ffp->mediacodec_all_videos || ffp->mediacodec_avc || ffp->mediacodec_hevc || ffp->mediacodec_mpeg2)
        node = ffpipenode_init_decoder_from_android_mediacodec(ffp, pipeline, opaque->weak_vout);

    return node;
}

创建decoder解码器

func_config_video_decoder

static int func_config_video_decoder(IJKFF_Pipeline *pipeline, FFPlayer *ffp)
{
    IJKFF_Pipeline_Opaque *opaque = pipeline->opaque;
    int                       ret = NULL;

    if (ffp->node_vdec) {
        ret = ffpipenode_config_from_android_mediacodec(ffp, pipeline, opaque->weak_vout, ffp->node_vdec);
    }

    return ret;
}

设置解码器参数

func_open_video_decoder

static IJKFF_Pipenode *func_open_video_decoder(IJKFF_Pipeline *pipeline, FFPlayer *ffp)
{
    IJKFF_Pipeline_Opaque *opaque = pipeline->opaque;
    IJKFF_Pipenode        *node = NULL;

    if (ffp->mediacodec_all_videos || ffp->mediacodec_avc || ffp->mediacodec_hevc || ffp->mediacodec_mpeg2)
        node = ffpipenode_create_video_decoder_from_android_mediacodec(ffp, pipeline, opaque->weak_vout);
    if (!node) {
        node = ffpipenode_create_video_decoder_from_ffplay(ffp);
    }

    return node;
}

打开解码器，并开始工作

func_open_audio_output

static SDL_Aout *func_open_audio_output(IJKFF_Pipeline *pipeline, FFPlayer *ffp)
{
    SDL_Aout *aout = NULL;
    if (ffp->opensles) {
        aout = SDL_AoutAndroid_CreateForOpenSLES();
    } else {
        aout = SDL_AoutAndroid_CreateForAudioTrack();
    }
    if (aout)
        SDL_AoutSetStereoVolume(aout, pipeline->opaque->left_volume, pipeline->opaque->right_volume);
    return aout;
}

下面两篇文章对理解，上面方法的调用以及硬解码有帮组。

Android解码API

Android手机直播（四）Android Media API - 简书

硬解码使用的

ijkplayer 解码实现分析——硬解篇 - 知乎

原总破局
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
ffplayer.zip_.h264_C ffmpeg h264_ffplayer dll_h264_opencv_high
07-14
OpenCV2.2+ffmpeg+Visual C++8.0开发的视频播放程序，可支持mpeg2,H264的播放，代码中存在的视频，可现场测试。
ijkplayer框架深入剖析
STN_LCD的专栏
06-16 1448
http://www.jianshu.com/p/daf0a61cc1e0 ijkplayer框架深入剖析   作者 金山视频云 关注 2017.01.23 11:34 字数 3965 阅读 1561评论 5喜欢 18 随着互联网技术的飞速发展，移动端播放视频的需求如日中天，由此也催生了一批开源/闭源的播放器，但是无论这个播放器功能
Android Multimedia实战（五）MediaCodec编码解码实例解析
WangShuo的专栏
04-28 4683
MediaCodec概述MediaCodec是一个Android原生的编解码器。 简单的来说，MediaCodec可以把摄像头采集的数据流编码为H264格式，这个过程是压缩过程。也可以把H264格式解码在surface类的控件上显示。我们先来看一下Android系统中解码器的命名，软解码器通常是以OMX.google开头的。硬解码器通常是以OMX.[hardware_vendor]开头的，比如TI
ijkplayer源码---设置选项
qq_15255121的专栏
12-16 1261
上一节我们说到 if (ffp->mediacodec_all_videos || ffp->mediacodec_avc || ffp->mediacodec_hevc || ffp->mediacodec_mpeg2) mediacodec_all_videos、 mediacodec_avc 、mediacodec_hevc、mediacodec_mpeg2在哪里设设置的。 搜索整个ijk的代码没有找到上面变量的设置，但是却找到了 static const.
rk3399芯片上使用MediaCodec解码遇到的坑(1)
louyijie的博客
05-24 2996
这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 欢迎使用Markdown编辑器 你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Mar
android播放vp8透明,Androids 使用MediaCodec在TV端播放不了视频
weixin_39759182的博客
05-30 812
请问是因为设备不支持mdiacodec吗，按理说应该都支持的呀。02-23 13:59:03.859 17173-17173/tv.danmaku.ijk.media.sample W/dalvikvm: VFY: unable to find class referenced in signature (Landroid/view/SearchEvent;)02-23 13:59:03.859 ...
ijkplayer 的动态库v7a 和v8a，支持海康摄像头RTSP h264协议，源码来自最新版本ijkplayer k0.8.0
07-10
ijkplayer 的动态库v7a 和v8a，支持海康摄像头RTSP h264协议，源码来自最新版本ijkplayer k0.8.0 使用原DEMO即可支持RTSP mp4文件等播放，首画面500ms显示. module-lite-rtsp.sh的内容如下： #! /usr/bin/env bash...
ffplayer,ffmpeg音视频同步
11-26
ffmpeg音视频同步，sdl2环境下，实现ffmpeg音视频同步，fplayer，vs2017编译
ffplay.exe
06-20
该资源就是ffplay的windows版本，由于rtmp-h265不是官方标准，故需要另外加入编译使用。 亲测ffplayer可正常使用。
vs2010 ffmpeg+sdl2.0搭建的ffplayer源码
08-09
基于ffmpeg + SDL2-2.0.10，在vs2010上移植了ffplay。经过验证，绝对有声音和图像，音视频皆可播放，另外网络视频播放也没问题。还没有做图形界面，通过命令参数输入。供大家参考。
Android原生编解码接口 MediaCodec 之——踩坑
热门推荐
小口锅
08-14 2万+
关键帧 MediaCodec 有两种方式触发输出关键帧，一是由配置时设置的 KEY_FRAME_RATE和KEY_I_FRAME_INTERVAL参数自动触发，二是运行过程中通过 setParameters 手动触发输出关键帧。 自动触发输出关键帧 在MediaCodec硬编码中设置Ｉ(关键帧)时间间隔，在 api 中是这么设置的 mediaFormat.setInteger(MediaF.........
MediaCodec 错误整理
Arman的博客
02-19 9984
System.err: android.media.MediaCodec$CodecException: Failed to initialize OMX.qcom.video.encoder.avc, error 0xfffffff4 错误原因：创建MediaCodec实例超限； ACodec: [OMX.allwinner.video.encoder.avc] ERROR(0x80001009) 错误原因： 1. 塞了错误的数据 2. 入队Frame数据时用了flag（BUFFER_FLA.
android MediaCodec的自己碰到的问题
mincheat的专栏
05-12 2万+
本文是个人在使用MediaCodec开发的时候碰到的一些问题，做下记录.... MediaCodec的基本用法，网上一大把，这里就不写了 1, 获取支持分辨率问题 Camera.Parameters parameters = _camera.getParameters(); List previewSizes = parameters.getSupportedPreviewS
Mediacodec
cwl的专栏
02-18 3466
基本原理和流程 Mediacodec用于硬件编解码，其存在3种形态Stopped[Uninitialized,Confirured,Error]Executing[Flushed,Running,End of Stream]，Released。构造一个Mediacodec对象（eg:MediaCodec.createDecoderByType）时处于Uninitialized态，执行configu
Android音视频-MediaCodec
hn_lgc的专栏
05-02 3054
原文：https://mp.weixin.qq.com/s?__biz=MzU3NTA3MDU1OQ==&mid=2247484865&idx=1&sn=174b8ca702466e83e72c7115d91b06ea&chksm=fd298df1ca5e04e7b2df9dc9f21e5cfe3e910204c905d8605f648ce6f6404432a83ae52a23a3&scene=178&cur_album_id=1638784435628064
android 编解码器MediaCodec使用中常见问题和解决办法
雪狼人的宿命
03-02 1万+
1.请求关键帧： if (Build.VERSION.SDK_INT &gt;= 23) { Bundle params = new Bundle(); params.putInt(MediaCodec.PARAMETER_KEY_REQUEST_SYNC_FRAME, 0); mMediaCodec.setParameters(params...
webrtc SDP和candidate消息生成位置学习
Andy Tools
06-27 1万+
本文以simplewebrtc源码为例，但实际上原生API的相应事件触发即会生成相应消息。 文章目录1 ICE消息生成及发送2 SDP 消息生成2.1 offer 消息生成2.2 answer 消息生成 1 ICE消息生成及发送 ICE消息触发是由 webrtc 原生API RTCPeerConnection 中onicecandidate事件传出，在经过rtcpeerconnection做了一...
ijkplayer源码走读（二）pipeline介绍
tongzhijie的博客
01-25 589
ijkplayer static void IjkMediaPlayer_native_setup(JNIEnv *env, jobject thiz, jobject weak_this) { MPTRACE("%s\n", __func__); IjkMediaPlayer *mp = ijkmp_android_create(message_loop)
【ijkplayer】整体结构总结（一）
微信公众号: 后端码匠
08-23 1078
【ijkplayer】整体结构总结
ffplayer.exe怎么用
最新发布
05-30
ffplayer.exe 是一个基于 FFmpeg 的播放器，使用命令行界面进行控制。以下是 ffplayer.exe 的基本使用方法： 1. 打开命令行窗口：可以使用 Windows 自带的 cmd.exe 或者 PowerShell 等工具。 2. 进入 ffplayer.exe 所在的目录：使用 `cd` 命令切换到 ffplayer.exe 所在的目录。 3. 播放音视频文件：执行 `ffplayer.exe 文件名` 命令，其中文件名可以是本地文件路径或者 URL 地址。例如，播放本地的 test.mp4 文件，命令如下： ``` ffplayer.exe test.mp4 ``` 4. 控制播放：在播放过程中，可以使用以下键盘快捷键进行控制： - 空格键：播放/暂停 - 方向键左/右：快退/快进 - 方向键上/下：调整音量 - q 键：退出播放器 5. 其他参数：可以使用 `ffplayer.exe -h` 命令查看 ffplayer.exe 支持的参数列表，可以进行一些参数配置，例如设置视频窗口大小等。 注意：ffplayer.exe 只支持部分音视频格式，如果播放的文件格式不支持，会出现无法播放的情况。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值