Android FFmpeg系列——1 播放视频

最新推荐文章于 2024-05-30 14:05:42 发布
最新推荐文章于 2024-05-30 14:05:42 发布
阅读量6.4k 收藏 34
点赞数 8
分类专栏： Android FFmpeg 文章标签： FFmpeg Android 播放视频
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/JohanMan/article/details/83091706
版权

Android FFmpeg系列——0 编译.so库
Android FFmpeg系列——1 播放视频
Android FFmpeg系列——2 播放音频
Android FFmpeg系列——3 C多线程使用
Android FFmpeg系列——4 子线程播放音视频
Android FFmpeg系列——5 音视频同步播放
Android FFmpeg系列——6 Java 获取播放进度
Android FFmpeg系列——7 实现快进/快退功能

由于公司项目原因，现在才得空来学习关于FFmpeg库的使用。

前言

在使用FFmpeg库的过程中，哎呦，各种心酸！！项目重新创建了N次，调试了N次，终于把视频流播放出来，心里甚是激动呀！

环境搭建

Android Studio 创建Demo项目，记得把 “Include c++ support” 勾上。

这里主要说2点：

  • 项目目录结构；
  • 文件配置，主要是app模块build.gradle 和 CMakeLists.txt 的配置；

项目目录结构

每个人放so位置不一样，这个会影响到配置文件，所以还是放出来会好一点。

项目目录结构

app模块build.gradle

...
android {
    ...
    defaultConfig {
        ...
        externalNativeBuild {
            cmake {
                cppFlags "-std=c++11 -frtti -fexceptions"
            }
            ndk {
                abiFilters "armeabi"
            }
        }
    }
    ...
    externalNativeBuild {
        cmake {
            path "CMakeLists.txt"
        }
    }
}
...

CMakeLists.txt

cmake_minimum_required(VERSION 3.4.1)

# 自己库文件
add_library(
    player
    SHARED
    src/main/cpp/player.cpp
)

# FFmpeg include 文件
include_directories(src/main/cpp/include)

# 编解码库
add_library(
    avcodec-lib
    SHARED
    IMPORTED
)
set_target_properties(
    avcodec-lib
    PROPERTIES IMPORTED_LOCATION
    ${CMAKE_SOURCE_DIR}/src/main/jniLibs/armeabi/libavcodec.so
)

# 滤镜库 暂时没用上
add_library(
    avfilter-lib
    SHARED
    IMPORTED
)
set_target_properties(
    avfilter-lib
    PROPERTIES IMPORTED_LOCATION
    ${CMAKE_SOURCE_DIR}/src/main/jniLibs/armeabi/libavfilter.so
)

# 文件格式库 大部分操作都需要这个库
add_library(
    avformat-lib
    SHARED
    IMPORTED
)
set_target_properties(
    avformat-lib
    PROPERTIES IMPORTED_LOCATION
    ${CMAKE_SOURCE_DIR}/src/main/jniLibs/armeabi/libavformat.so
)

# 工具库
add_library(
    avutil-lib
    SHARED
    IMPORTED
)
set_target_properties(
    avutil-lib
    PROPERTIES IMPORTED_LOCATION
    ${CMAKE_SOURCE_DIR}/src/main/jniLibs/armeabi/libavutil.so
)

# 重采样库 主要用于音频的转换
add_library(
    swresample-lib
    SHARED
    IMPORTED
)
set_target_properties(
    swresample-lib
    PROPERTIES IMPORTED_LOCATION
    ${CMAKE_SOURCE_DIR}/src/main/jniLibs/armeabi/libswresample.so
)

# 视频格式转换库 主要用于视频的转换
add_library(
    swscale-lib
    SHARED
    IMPORTED
)
set_target_properties(
    swscale-lib
    PROPERTIES IMPORTED_LOCATION
    ${CMAKE_SOURCE_DIR}/src/main/jniLibs/armeabi/libswscale.so
)

# 主要 android 库 native window 需要这个库
target_link_libraries(
    player
    log
    android
    avcodec-lib
    avfilter-lib
    avformat-lib
    avutil-lib
    swresample-lib
    swscale-lib
)

C 代码

#include <jni.h>
#include <android/native_window.h>
#include <android/native_window_jni.h>
#include <android/log.h>

extern "C" {
#include "libavformat/avformat.h"
#include "libavcodec/avcodec.h"
#include "libswscale/swscale.h"
#include "libavutil/imgutils.h"
}

// Android 打印 Log
#define LOGE(FORMAT,...) __android_log_print(ANDROID_LOG_ERROR, "player", FORMAT, ##__VA_ARGS__);

/**
 * 播放视频流
 * R# 代表申请内存 需要释放或关闭
 */
extern "C"
JNIEXPORT void JNICALL
Java_com_johan_player_Player_playVideo(JNIEnv *env, jobject instance, jstring path_, jobject surface) {
    // 记录结果
    int result;
    // R1 Java String -> C String
    const char *path = env->GetStringUTFChars(path_, 0);
    // 注册 FFmpeg 组件
    av_register_all();
    // R2 初始化 AVFormatContext 上下文
    AVFormatContext *format_context = avformat_alloc_context();
    // 打开视频文件
    result = avformat_open_input(&format_context, path, NULL, NULL);
    if (result < 0) {
        LOGE("Player Error : Can not open video file");
        return;
    }
    // 查找视频文件的流信息
    result = avformat_find_stream_info(format_context, NULL);
    if (result < 0) {
        LOGE("Player Error : Can not find video file stream info");
        return;
    }
    // 查找视频编码器
    int video_stream_index = -1;
    for (int i = 0; i < format_context->nb_streams; i++) {
        // 匹配视频流
        if (format_context->streams[i]->codecpar->codec_type == AVMEDIA_TYPE_VIDEO) {
            video_stream_index = i;
        }
    }
    // 没找到视频流
    if (video_stream_index == -1) {
        LOGE("Player Error : Can not find video stream");
        return;
    }
    // 初始化视频编码器上下文
    AVCodecContext *video_codec_context = avcodec_alloc_context3(NULL);
    avcodec_parameters_to_context(video_codec_context, format_context->streams[video_stream_index]->codecpar);
    // 初始化视频编码器
    AVCodec *video_codec = avcodec_find_decoder(video_codec_context->codec_id);
    if (video_codec == NULL) {
        LOGE("Player Error : Can not find video codec");
        return;
    }
    // R3 打开视频解码器
    result  = avcodec_open2(video_codec_context, video_codec, NULL);
    if (result < 0) {
        LOGE("Player Error : Can not find video stream");
        return;
    }
    // 获取视频的宽高
    int videoWidth = video_codec_context->width;
    int videoHeight = video_codec_context->height;
    // R4 初始化 Native Window 用于播放视频
    ANativeWindow *native_window = ANativeWindow_fromSurface(env, surface);
    if (native_window == NULL) {
        LOGE("Player Error : Can not create native window");
        return;
    }
    // 通过设置宽高限制缓冲区中的像素数量，而非屏幕的物理显示尺寸。
    // 如果缓冲区与物理屏幕的显示尺寸不相符，则实际显示可能会是拉伸，或者被压缩的图像
    result = ANativeWindow_setBuffersGeometry(native_window, videoWidth, videoHeight,WINDOW_FORMAT_RGBA_8888);
    if (result < 0){
        LOGE("Player Error : Can not set native window buffer");
        ANativeWindow_release(native_window);
        return;
    }
    // 定义绘图缓冲区
    ANativeWindow_Buffer window_buffer;
    // 声明数据容器 有3个
    // R5 解码前数据容器 Packet 编码数据
    AVPacket *packet = av_packet_alloc();
    // R6 解码后数据容器 Frame 像素数据 不能直接播放像素数据 还要转换
    AVFrame *frame = av_frame_alloc();
    // R7 转换后数据容器 这里面的数据可以用于播放
    AVFrame *rgba_frame = av_frame_alloc();
    // 数据格式转换准备
    // 输出 Buffer
    int buffer_size = av_image_get_buffer_size(AV_PIX_FMT_RGBA, videoWidth, videoHeight, 1);
    // R8 申请 Buffer 内存
    uint8_t *out_buffer = (uint8_t *) av_malloc(buffer_size * sizeof(uint8_t));
    av_image_fill_arrays(rgba_frame->data, rgba_frame->linesize, out_buffer, AV_PIX_FMT_RGBA, videoWidth, videoHeight, 1);
    // R9 数据格式转换上下文
    struct SwsContext *data_convert_context = sws_getContext(
            videoWidth, videoHeight, video_codec_context->pix_fmt,
            videoWidth, videoHeight, AV_PIX_FMT_RGBA,
            SWS_BICUBIC, NULL, NULL, NULL);
    // 开始读取帧
    while (av_read_frame(format_context, packet) >= 0) {
        // 匹配视频流
        if (packet->stream_index == video_stream_index) {
            // 解码
            result = avcodec_send_packet(video_codec_context, packet);
            if (result < 0 && result != AVERROR(EAGAIN) && result != AVERROR_EOF) {
                LOGE("Player Error : codec step 1 fail");
                return;
            }
            result = avcodec_receive_frame(video_codec_context, frame);
            if (result < 0 && result != AVERROR_EOF) {
                LOGE("Player Error : codec step 2 fail");
                return;
            }
            // 数据格式转换
            result = sws_scale(
                    data_convert_context,
                    (const uint8_t* const*) frame->data, frame->linesize,
                    0, videoHeight,
                    rgba_frame->data, rgba_frame->linesize);
            if (result <= 0) {
                LOGE("Player Error : data convert fail");
                return;
            }
            // 播放
            result = ANativeWindow_lock(native_window, &window_buffer, NULL);
            if (result < 0) {
                LOGE("Player Error : Can not lock native window");
            } else {
                // 将图像绘制到界面上
                // 注意 : 这里 rgba_frame 一行的像素和 window_buffer 一行的像素长度可能不一致
                // 需要转换好 否则可能花屏
                uint8_t *bits = (uint8_t *) window_buffer.bits;
                for (int h = 0; h < videoHeight; h++) {
                    memcpy(bits + h * window_buffer.stride * 4,
                           out_buffer + h * rgba_frame->linesize[0],
                           rgba_frame->linesize[0]);
                }
                ANativeWindow_unlockAndPost(native_window);
            }
        }
        // 释放 packet 引用
        av_packet_unref(packet);
    }
    // 释放 R9
    sws_freeContext(data_convert_context);
    // 释放 R8
    av_free(out_buffer);
    // 释放 R7
    av_frame_free(&rgba_frame);
    // 释放 R6
    av_frame_free(&frame);
    // 释放 R5
    av_packet_free(&packet);
    // 释放 R4
    ANativeWindow_release(native_window);
    // 关闭 R3
    avcodec_close(video_codec_context);
    // 释放 R2
    avformat_close_input(&format_context);
    // 释放 R1
    env->ReleaseStringUTFChars(path_, path);
}

使用 FFmpeg 播放视频流程如下：

  1. 注册组件
  2. 打开视频文件
  3. 查找视频文件的流信息
  4. 查找视频编码器并打开
  5. 播放视频准备
  6. 视频格式转换准备
  7. 循环读取帧
  8. 解码
  9. 视频格式转换
  10. 播放视频
  11. 释放

代码已经注释得比较清楚了，相信大家看得懂！！

Java 代码

布局文件：

<?xml version="1.0" encoding="utf-8"?>
<LinearLayout xmlns:android="http://schemas.android.com/apk/res/android"
    android:orientation="vertical"
    android:layout_width="match_parent"
    android:layout_height="match_parent">

    <SurfaceView
        android:id="@+id/surface_view"
        android:layout_width="match_parent"
        android:layout_height="250dp"
        />

    <Button
        android:layout_width="match_parent"
        android:layout_height="wrap_content"
        android:text="Play"
        android:onClick="play"
        />

</LinearLayout>

Player Native 代码：

public class Player {

    static {
        System.loadLibrary("player");
    }

    public native void playVideo(String path, Surface surface);

}

Activity 播放代码：


public class MainActivity extends AppCompatActivity {

    private SurfaceView surfaceView;
    private SurfaceHolder surfaceHolder;

    @Override
    protected void onCreate(Bundle savedInstanceState) {
        super.onCreate(savedInstanceState);
        setContentView(R.layout.activity_main);
        surfaceView = (SurfaceView) findViewById(R.id.surface_view);
        surfaceHolder = surfaceView.getHolder();
    }

    public void play(View view) {
        String videoPath = Environment.getExternalStorageDirectory() + "/mv.mp4";
        Player player = new Player();
        player.playVideo(videoPath, surfaceHolder.getSurface());
    }

}

效果图

效果图

小结

使用FFmpeg主要是集成时需要谨慎，还有就是对这个库不太了解！

接下来继续摸索！加油！！

JohanMan
关注
  • 8
    点赞
  • 踩
  • 34
    收藏
    觉得还不错? 一键收藏
  • 7
    评论
专栏目录
基于FFmpeg的简单Android视频播放器
yinshipin007的博客
05-06 649
1. 模块分割首先对这个视频播放器所采用的一些部件要清楚。这个播放器主要可以拆分为4个部分：1.解码：FFmpeg2.音频输出：OpenSLES3.视频渲染：OpenGLES这些框架都是基于C的api，因此这次我们的主要工作将会集中在NDK部分。而关于NDK的一些知识，之前的博客也有讲过，所以这个工程会是对之前知识的一次综合运用。为了提高可移植性，对关键部件使用接口来规范其API接口。对于播放器内部，播放的音频数据格式为16位PCM，44.1kHz采样率，双声道。
android视频聚合,Android使用FFmpeg(三)--ffmpeg实现视频播放
weixin_42116713的博客
05-30 781
前言如果你已经准备好ffmpeg的开发环境，那么我们在这篇文章中实现对视频的一个播放，如果还没有准备好，请看前面的内容。正文 Ok，上图就是使用ffmpeg实现了一个视频的播放的大概流程图，那么，我们将根据流程图来编写代码，这样子，代码的编写就会显得比较简单，比较好理解了。1.注册各大组件，这一步很重要，如果不注册就无法使用后面的函数了。av_register_all();2.在解码之前我们得获取...
Android 本地视频播放器开发 —— ffmpeg解码视频文件中的音频
mengzhengjie的专栏
06-16 1058
在上一章中Android本地视频播放器开发--NDK编译FFmpeg能够获取编译出来的ffmpeg库，接下来就是调用ffmpeg来实现解码，这里我们先解码音频，然后在播放音频，同时为了适应性我会用不同的方法进行播放例如使用Android提供的AudioTrack，SDL、OpengAL,OpenSL ES，最终合入视频播放器的是OpenSL ES，这样可以减少CPU的利用率。接下来在这一章中，
Android实现视频播放的3种实现方式（原生方式）
最新发布
shi450561200的博客
05-30 778
虽然VideoView的实现方式很简单，但是由于是自带的封装好的类，所以无论是播放器的大小、位置以及控制都不受我们控制。
FFmpeg实现Android音视频播放器【1】
weixin_40194067的博客
06-17 649
这一步主要是将视频文件中的视频和音频数据进行拆分。首先获取AVFormatContext对象，通过AVFormatContext打开音视频数据源（.mp4文件或者音视频流）
Android使用FFmpeg动态库播放视频
吓成一坨兔子
10-29 580
FFmpeg环境的搭建在前面一篇博客中已经写了,详情参照:AndroidStudio3.5.1下搭建FFmpeg环境 本文仅实现将mp4的视频部分渲染到SurfaceView中， 不包含音频，不包含播放控制。文中的视频是在SD卡根目录中有一个input.flv文件,需要手动导入,AndroidManifest.xml中需要声明读取权限 UI界面 <?xml version="1.0"...
安卓Android源码——FFMpeg.rar
10-11
在 Android 上使用 FFmpeg，可以实现强大的音视频处理功能，比如视频剪辑、格式转换、流媒体播放等。这个压缩包 "安卓Android源码——FFMpeg.rar" 很可能包含了一个将 FFmpeg 集成到 Android 应用中的示例源代码。 ...
安卓Android源码——rockplayer_ffmpeg.rar
10-11
ffmpeg是一个开源的多媒体处理工具集，它包含了一系列用于音视频编解码、格式转换、流媒体处理的库和命令行工具。在RockPlayer中，ffmpeg主要负责视频和音频的解码工作，它的引入大大增强了RockPlayer对各种编码格式...
Android播放器源码——可以直接运行使用
07-27
【Android播放器源码——可以直接运行使用】 在Android开发中，构建一个功能完善的视频播放器是常见的需求。这个源码项目提供了一个可以直接运行使用的Android播放器解决方案，它具备播放多种视频格式的能力，并且...
Android 使用 FFmpeg （一）——编译.so文件Demo
12-16
这个"Android 使用 FFmpeg （一）——编译.so文件Demo"项目代码，提供了从编译FFmpeg到创建简单应用的全程示例，可以帮助开发者快速理解和实践在Android上集成FFmpeg。通过这个Demo，你可以深入学习如何在Android...
安卓Android源码——完整版视频播放器.zip
10-11
1. **VideoView与SurfaceView**：在Android中，VideoView和SurfaceView是两种常见的用于播放视频的视图组件。VideoView提供了更简单的接口，可以直接设置视频源并播放，而SurfaceView则允许更底层的图形操作，适合...
Android使用FFmpeg+Opengles来解码播放视频
08-31
Android使用FFmpeg来解码视频，Opengles显示YUV数据的demo
Android 基于ffmpeg开发简易播放器 - ffmpeg解封装
weixin_34128839的博客
06-11 305
ffmpeg解封装 需要调用ffmpeg的API首先需要引入对应的头文件： extern "C"{ #include &lt;libavcodec/avcodec.h&gt; #include &lt;libavformat/avformat.h&gt; } 复制代码1.初始化解封装 //初始化解封装 av_register_all(); //初始化网络，可以直接从服务器拉流 avformat_n...
FFmpeg+OpenGL ES+OpenSL ES打造Android视频播放器
05-06
FFmpeg+OpenGL ES+OpenSL ES打造Android视频播放器教程，该课程基于C++语言，用FFmpeg、OpenGL ES、OpenSL ES和MediaCodec打造Android视频播放器。以录播课形式讲解课程所涉及的知识点和整体流程，每节课都有相关的PPT和源码资料，并用通俗易懂的方式讲解课程。适合人群 有一定的C++基础和Android开发经验。
FFmpeg打造Android万能音频播放器
01-05
FFmpeg打造Android万能音频播放器视频教程，移植FFmpeg到Android平台，利用FFmpeg解码音频数据并用OpenSL ES来播放，打造Android万能播放器。
Android 使用 FFmpeg （二）——视屏流播放简单实现
一点一刻
12-19 7396
在Android上使用FFmpeg+ANativeWindow 简单实现视频流播放
Android FFmpeg系列——5 音视频同步播放
JohanMan的博客
10-19 1818
音视频同步播放是做播放器的难点之一，在博主用到的播放器中，有一款播放器我真的无法忍受，那就是百度云播放器！这里我真的得吐槽一下，卡顿之后，然后视频可以正常播放，但是没有声音，声音竟然没了！！你这么一个大厂，连这点都搞不定？！而且我还提过2次建议（因为实在忍不了，但是又必须得用），也不是出现的概率很低，真搞不明白！！好啦，吐槽完了，回归正题，我们来学习怎么实现音视频用不播放！ 首先，我们得先了解几个...
实现android ffmpeg播放视频
厚德出品，必是精品
05-12 4049
前面两篇文章已经可以生成so，并且可以在Android studio中通过配置可以运行，并且可以打印出ffmpeg的配置信息。 准备： 在进行播放视频时需要一个吧yuv图像数据转换成argb的图像数据，这里还需要一个libyuv.so 的一个so库。可以通过这篇文章生成这个so ：https://blog.csdn.net/quan648997767/article/details/7088028...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 7
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值