android ndk之opencv+MediaCodec硬编解码来处理视频动态时间水印

最新推荐文章于 2024-08-29 08:45:22 发布

渐行渐远是否还有一种坚持留在心间

最新推荐文章于 2024-08-29 08:45:22 发布

阅读量4.2k

点赞数 1

分类专栏： android

本文链接：https://blog.csdn.net/u013147734/article/details/81084646

版权

android ndk之opencv+MediaCodec硬编解码来处理视频水印学习笔记

android视频处理学习笔记。以前android增加时间水印的需求,希望多了解视频编解码,直播,特效这一块,顺便熟悉NDK。

openvc能干什么？为什么要集成openvc？

openvc是一套计算机视觉处理库，直白地讲，就是处理图片和识别图片的。有自己的算法后，可以做一些高级的东西，比如机器视觉，AR，人脸识别等。
android方面自带了bitmap和canvas处理库，底层还可以通过opengl硬件加速，其实渲染处理的速度也很快，甚至很多地方优过opencv。
但是，android针对视频数据，相机采集数据的yuv格式缺少api，或者yuv转rgb转bitmap，这些相互转化的过程也耗时巨大，而我发现opencv是对数据直接进行处理的，一个420sp2bgr的转换耗时极少，图像处理完成以后直达yuv，然后就可以给编码器喂数据了。

MediaCodec和ffmpeg

mediaCodec是系统自带的，原则上有GPU的手机就会有MediaCodec提供出来，使用GPU硬编码，理论上应该比软编码ffmpeg快。

YUV420p，YUV420sp，NV21，YV12
不同的系统的中对应还有别名，简单理解为数据排列的方式不同，详询度娘。

freetype
一款处理字体的C++库，可以加载ttf字体。opencv有默认字体，但是不支持中文，所以需要中文的要集成freetype。用ffmpeg处理中文也需要集成

openvc的集成
opencv支持android版，有java代码，但是集成java代码对我没有意义。首先下载opencv4android，在studio为项目include c++ support，或者在build.gradle添加externalNativeBuild


    defaultConfig {
        applicationId "com.dxtx.codec"
        minSdkVersion 15
        targetSdkVersion 22
        versionCode 1
        versionName "1.0"
        externalNativeBuild {
            cmake {
                cppFlags ""
            }
        }
        ndk {
            abiFilters "armeab