Android CameraX NDK OpenCV(四）-- 二维码检测与识别

学更好的别人，

做更好的自己。

——《微卡智享》

本文长度为1999字，预计阅读5分钟

前言

OpenCV在4的版本后就有了二维码QRCode的检测和识别功能，当时刚出的时候效率及识别效果都还一般，在4.1.2的版本中也改善了精度和速度，然后后面4.3版本中的更新又加入了多个二维码检测的函数，今天这篇就来说一下OpenCV自带的二维码检测。

实现效果

检测函数

微卡智享

bool cv::QRCodeDetector::detectAndDecodeMulti ( 

  InputArray  img,   

  std::vector< std::string > &  decoded_info, 

  OutputArray  points = noArray(), 

  OutputArrayOfArrays  straight_qrcode = noArray()  

 )  const 

参数：

img:  输入的源图像

decoded_info:  QR码解析的信息数组

points:  QR码矩形的坐标点

straight_qrcode：包含整化和二进制 QR 代码的图像的可选输出向量‎

实现方式

微卡智享

检测函数还是很简单，直接调用返回结果就可以了，本章里面第二个学习巩固的点是关于JNI中检测到怎么返回二维码的位置和解析的文本显示。《Android NDK编程（七）--- JNI中List结构的类数据返回》文章中有简单的介绍过返回实体类的方式，在这里我们就用到了从JNI中返回列表实体的实现。

01

定义实体类

package lib.vaccae.opencv


import android.graphics.Point
import android.graphics.PointF


/**
 * 作者：Vaccae
 * 邮箱：3657447@qq.com
 * 创建时间：2020-12-21 14:04
 * 功能模块说明：
 */
class QrCode {
    //二维码信息
    var msg:String?=null
    //坐标点
    var points : MutableList<PointF>? = null


}

定义了一个返回的QrCode类，里面一个是解析的文本，另一个是List<PointF>，用于获取返回的二码维矩形的坐标点。

02

JNI函数定义

    //QRCode检测
    external fun qrCodeDetector(bytes: ByteArray,width :Int, height:Int): List<QrCode>?

在OpenCVJNI的类中加入了qrCodeDetector的检测函数，传入的方式和前面的基本一样，返回值为List<QrCode>。

03

C++中实现

//QRCode检测
extern "C"
JNIEXPORT jobject JNICALL
Java_lib_vaccae_opencv_OpenCVJNI_qrCodeDetector(JNIEnv *env, jobject thiz, jbyteArray bytes,
                                                jint width, jint height) {
    try {
        Mat src = byteArrayToMat(env, bytes, width, height);


        //获取ArrayList类引用
        jclass list_jcls = env->FindClass("java/util/ArrayList");
        if (list_jcls == nullptr) {
            LOGI("ArrayList没找到相关类!");
            return 0;
        }
        //获取ArrayList构造函数id
        jmethodID list_init = env->GetMethodID(list_jcls, "<init>", "()V");
        //创建一个ArrayList对象
        jobject list_obj = env->NewObject(list_jcls, list_init);
        //获取ArrayList对象的add()的methodID
        jmethodID list_add = env->GetMethodID(list_jcls, "add", "(Ljava/lang/Object;)Z");


        //获取QrCode类
        jclass qrcls = env->FindClass("lib/vaccae/opencv/QrCode");
        //定义QrCode类中的属性
        jfieldID qrmsg = env->GetFieldID(qrcls, "msg", "Ljava/lang/String;");
        jfieldID qrpts = env->GetFieldID(qrcls, "points", "Ljava/util/List;");


        //定义Points的List
        jclass pts_cls = env->FindClass("java/util/ArrayList");
        jmethodID pts_init = env->GetMethodID(pts_cls, "<init>", "()V");
        jmethodID pts_add = env->GetMethodID(pts_cls, "add", "(Ljava/lang/Object;)Z");


        //定义实例化Point的方法
        jclass pt_cls = env->FindClass("android/graphics/PointF");
        jmethodID pt_init = env->GetMethodID(pt_cls, "<init>", "(FF)V");


        //QRCode检测
        vector<string> resmsg;
        vector<Point2f> respts;
        QRCodeDetector qrCodeDetector;
        jboolean blres = qrCodeDetector.detectAndDecodeMulti(src, resmsg, respts);
        if (blres) {
            for (int i = 0; i < resmsg.size(); ++i) {
                jobject qrobj = env->AllocObject(qrcls);
                //LOGI("msg:%s",resmsg[i].c_str());
                //设置返回QrCode显示的信息
                env->SetObjectField(qrobj, qrmsg, env->NewStringUTF(resmsg[i].c_str()));
                //设置返回的坐标点
                //创建一个ArrayList对象
                jobject pts_obj = env->NewObject(pts_cls, pts_init);
                //循环Point的4个坐标点
                for (int k = 0; k < 4; ++k) {
                    //根据当前第几个QrCode判断坐标点
                    int idx = 4 * i + k;
                    //实例化坐标点
                    jobject pt_obj = env->NewObject(pt_cls, pt_init, respts[idx].x, respts[idx].y);
                    //LOGI("point:%d x:%f y:%f",idx,respts[idx].x,respts[idx].y);
                    //添加到List<Point>中
                    env->CallBooleanMethod(pts_obj, pts_add, pt_obj);
                }


                //设置返回QrCode的坐标点列表
                env->SetObjectField(qrobj, qrpts, pts_obj);


                //插入到返回的列表中
                env->CallBooleanMethod(list_obj, list_add, qrobj);
            }
        }


        return list_obj;
    } catch (Exception e) {
        jclass je = env->FindClass("java/lang/Exception");
        env->ThrowNew(je, e.what());
    } catch (...) {
        jclass je = env->FindClass("java/lang/Exception");
        env->ThrowNew(je, "Unknown exception in JNI code {nMatToBitmap}");
    }
}

方法的代码挺多，主要是调用JAVA中的类，动态创意List，再ADD添加实体，因为本身返回的List<QrCode>中的还嵌套着一个List，所以这样的代码就会多一些，上面的定义也都说的比较清楚，看就应该明白了。

Demo地址

https://github.com/Vaccae/AndroidCameraXNDKOpenCV.git

完

扫描二维码

获取更多精彩

微卡智享

「 往期文章 」

.Net5下定时任务Quartz的使用

Android CameraX NDK OpenCV(三）-- 人脸贴图替换

使用.Net5尝鲜的一些小总结及Configuration.Json读取配置文件的使用