之前有篇博客简单写过如何用Ffmpeg解码视频流,当时只用软件码。后面通过项目历练及各种优化,加入了各种硬解码和软解码,并实现与openCv的对接,使其具有项目意义。在此之前,希望你又一些基础的JNI编程知识,比如配置CmakeList以及知道如何build。
本文中重点主要有openGL shader渲染过程,Ffmpeg解码流程,JNI多线程以及如何回调数据到Java。
第一步:编译Ffmpeg源码,目前个人编译的是Ffmpeg3.4版本,注意Android端编译需要支持NEON加速和硬解码配置,并在源码中修改默认缓存大小(源码中默认为65535,可改成65535*5),使用的交叉编译器为ndk-r14b(之前试过用16的版本,发现缺少某些头文件,所以改成了14的版本)。具体编译不多说,读者可以直接使用已经编译好的so文件,在Demo中会给出。
第二步:Ffmpeg的使用流程:
1.初始化:
注册解码器,avcodec_register_all(); 创建上下文,分配解码内存空间;
2.打开视频流:
avformat_open_input(),支持UDP和TCP方式,以及参数配置;
3.找到视频流:
avformat_find_stream_info,文章主要针对于视频,所以略过音频部分,此方法可以获取视频数据的宽度和高度。
4.寻找解码器:
avcodec_find_decoder_by_name(),用于硬解码,支持H264,H265,MPEG