由于OpenCV提供了Android平台的SDK,这样在Android平台下开发视觉应用就很方便了。当然,在iOS平台也提供了SDK,即framework。
由于Android上层是java,这个SDK的实现就提供了java形式的包和类,底下调用的当然都是用c++实现的jni啦。
那么Android下,如何使用OpenCV Library来得到相机预览图像帧数据并进行处理呢,你可以参考OpenCV Android SDK中的一个例子face-detection,就是要实现CvCameraViewListener2接口中的onCameraFrame方法,该方法的参数CvCameraViewFrame也是一个接口。它有两个方法:rgba()和gray(),通过这两个方法可以分别返回两种格式的相机图像(都是Mat对象的形式)供开发者处理。
遇到的一个问题是:当我想把rgba()方法返回的Mat对象通过imwrite保存为jpg到sdcard下,结果出来的图片明显颜色不对。仔细观察发现是红蓝颜色分量互换了。于是明白原因,OpenCV保存图像时需要图像是按BGRA顺序存储的,这也是Windows平台下习惯的做法,而这个Mat对象的图像是按RGBA顺序存储的。这就要用到cvtColor函数给转一下。
下面给出示例代码:
public Mat onCameraFrame(CvCameraViewFrame inputFrame) {
Mat rgbaClr = inputFrame.rgba();
Mat bgraClr = new Mat();
Imgproc.cvtColor(rgbaClr, bgraClr, Imgproc.COLOR_RGBA2BGRA);
Imgcodecs.imwrite(Environment.getExternalStorageDirectory().getPath() + "/123.jpg", bgraClr);
//以下略...
这样保存的图像就没有颜色失真了。