Android开发：实时处理摄像头预览帧视频--浅析PreviewCallback,onPreviewFrame，AsyncTask的综合应用-CSDN博客

本文链接：https://blog.csdn.net/cainiaoxiaozhou/article/details/9198637

Camera.PreviewCallback：定义了onPreviewFrame(byte[] data, Camera camera) 方法，当存在预览帧(preview frame)时调用该方法。可以传入保存当前图像像素的字节数组。在Camera对象上，有3种不同的方式使用这个回调：

· setPreviewCallback(Camera.PreviewCallback)：使用此方法注册一个Camera. PreviewCallback，这将确保在屏幕上显示一个新的预览帧时调用onPreviewFrame方法。传递到onPreviewFrame方法中的数据字节数组最有可能采用YUV格式。但是，Android 2.2是第一个包含了YUV格式解码器(YuvImage)的版本；在以前的版本中，必须手动完成解码。

· setOneShotPreviewCallback(Camera.PreviewCallback)：利用Camera对象上的这个方法注册Camera.PreviewCallback，从而当下一幅预览图像可用时调用一次onPreviewFrame。同样，传递到onPreviewFrame方法的预览图像数据最有可能采用YUV格式。可以通过使用ImageFormat中的常量检查Camera. getParameters(). getPreviewFormat()返回的结果来确定这一点。

· setPreviewCallbackWithBuffer(Camera.PreviewCallback)：在Android 2.2中引入了该方法，其与setPreviewCallback的工作方式相同，但要求指定一个字节数组作为缓冲区，用于预览图像数据。这是为了能够更好地管理处理预览图像时使用的内存。

● Camera.AutoFocusCallback：定义了onAutoFocus方法，当完成一个自动聚焦活动时调用它。通过传入此回调接口的一个实例，在调用Camera对象上的autoFocus方法时会触发自动聚焦。

● Camera.ErrorCallback：定义了onError方法，当发生一个Camera错误时调用它。有两个常量可用于与传入的错误代码进行比较：CAMERA_ERROR_UNKNOWN和CAMERA_ERROR_SERVER_DIED。

● Camera.OnZoomChangeListener：定义了onZoomChange方法，当正在进行或完成“平滑缩放”(慢慢缩小或放大)时调用它。在Android 2.2 (API Level 8)中引入了这个类和方法。

Camera.ShutterCallback：定义了onShutter方法，当捕获图像时立刻调用它

很多时候，android摄像头模块不仅预览，拍照这么简单，而是需要在预览视频的时候，能够做出一些检测，比如最常见的人脸检测。在未按下拍照按钮前，就检测出人脸然后矩形框标示出来，再按拍照。那么如何获得预览帧视频么？

只需要在Activity里继承PreviewCallback这个接口就行了。示例如下：

public class RectPhoto extends Activity implements SurfaceHolder.Callback, PreviewCallback{}。（注意这个SurfaceHolder.Callback是用来预览摄像头视频）。

继承这个方法后，会自动重载这个函数：public void onPreviewFrame(byte[] data, Camera camera) {}这个函数里的data就是实时预览帧视频。一旦程序调用PreviewCallback接口，就会自动调用onPreviewFrame这个函数。调用PreviewCallback的方法有三种，总共有三种方式调用这个回调。所谓回调就是当条件满足时，自动触发调用这个函数。分别是：.setPreviewCallback, setOneShotPreviewCallback, setPreviewCallbackWithBuffer, 我一般是使用第二种方式。

这里解释下，如果Activity继承了PreviewCallback这个接口，只需 Camera.setOneShotPreviewCallback(this);就可以了。程序会自动调用主类Activity里的onPreviewFrame函数。如果Camera.setOneShotPreviewCallback（）这个函数是在主类Activity里的内部类如class A里面，里面的参数应写为Camera.setOneShotPreviewCallback（YourActivity.this）。当然这里，也可以定义一个变量，如Camera.PreviewCallback mPreviewCallback,在调用的时候用Camera.setOneShotPreviewCallback（mPreviewCallback）来完成。相信很多人都熟悉这点，就不罗嗦了。

按理说只要在onPreviewFrame（）这个函数里写你的处理程序就可以了。当通常不这么做，因为处理实时预览帧视频的算法可能比较复杂，这就需要借助AsyncTask开启一个线程在后台处理数据。这里假设我们定义一个FaceTask来进行人脸检测，可以这样写：

    /*自定义的FaceTask类，开启一个线程分析数据*/
   private class FaceTask extends AsyncTask<Void, Void, Void>{

       private byte[] mData;
       //构造函数
       PalmTask(byte[] data){
           this.mData = data;
       }

       @Override
       protected Void doInBackground(Void... params) {
           // TODO Auto-generated method stub
           Size size = myCamera.getParameters().getPreviewSize(); //获取预览大小
           final int w = size.width; //宽度
           final int h = size.height;
           final YuvImage image = new YuvImage(mData, ImageFormat.NV21, w, h, null);
           ByteArrayOutputStream os = new ByteArrayOutputStream(mData.length);
           if(!image.compressToJpeg(new Rect(0, 0, w, h), 100, os)){
               return null;
           }
           byte[] tmp = os.toByteArray();
           Bitmap bmp = BitmapFactory.decodeByteArray(tmp, 0,tmp.length);
            doSomethingNeeded(bmp);   //自己定义的实时分析预览帧视频的算法

          return null;
       }

   }

注意上面的bmp就是Bitmap格式的实时预览帧数据。doSomethingNeeded(bmp) 就是你要对预览帧视频进行的处理，可以是检测人脸或其他，如分析有无火灾。或者是进行传输。另外，这里是通过YuvImage和ImageFormat.NV21来解析数据的。在华为u9200上，android4.0.3的系统运行良好。不同手机上支持的格式可能有所不同。网上也有自己写算法进行转化的，需要的可以自己找，但这里如果支持这个格式就不用自己写转换算法了。
onPreviewFrame()里可以这样写：

     /*获取预览帧视频*/
   public void onPreviewFrame(byte[] data, Camera camera) {
       // TODO Auto-generated method stub
       if(null != mFaceTask){
           switch(mFaceTask.getStatus()){
           case RUNNING:
               return;
           case PENDING:
               mFaceTask.cancel(false);
               break;
           }
       }
       mFaceTask = new PalmTask(data);
       mFaceTask.execute((Void)null);

   }

上面的mFaceTask是一个全局变量。通过onPreviewFrame，AsyncTask的综合应用，让复杂的处理算法执行在后台，也就是doInBackground这里，是不是比较绿色？

接下来就是什么时候触发onPreviewFrame()这个函数里，可以是按一个按键触发一次，就在按键的监听里写上 myCamera.setOneShotPreviewCallback(RectPhoto.this);便会自动触发一次。有人说想先聚焦，然后再分析预览帧。就在onAutofocus里的回调写。如下：

        //自动聚焦变量回调
       myAutoFocusCallback = new AutoFocusCallback() {

           public void onAutoFocus(boolean success, Camera camera) {
               // TODO Auto-generated method stub
               if(success)//success表示对焦成功
               {
                   Log.i(tag, "myAutoFocusCallback: success...");
                   myCamera.setOneShotPreviewCallback(RectPhoto.this);


               }
               else
               {
                   //未对焦成功

Log.i(tag, "myAutoFocusCallback: 失败了...");

                  //这里也可以加上myCamera.autoFocus(myAutoFocusCallback)，如果聚焦失败就再次启动聚焦。
               }

           }
       };

大多数时候，希望程序自动每隔多长时间，自动进行一次检测预览帧。这也好办，实施如下：

<SPAN xmlns="http://www.w3.org/1999/xhtml"> class ScanThread implements Runnable{
public void run() {
// TODO Auto-generated method stub
while(!Thread.currentThread().isInterrupted()){
try {
if(null != myCamera && isPreview)
{
//myCamera.autoFocus(myAutoFocusCallback);
myCamera.setOneShotPreviewCallback(RectPhoto.this);
Log.i(tag, "setOneShotPreview...");
}
Thread.sleep(1500);
} catch (InterruptedException e) {
// TODO Auto-generated catch block
e.printStackTrace();
Thread.currentThread().interrupt();
}
}
}
}</SPAN>

	class ScanThread implements Runnable{

		public void run() {
			// TODO Auto-generated method stub
			while(!Thread.currentThread().isInterrupted()){
				try {
					if(null != myCamera && isPreview)
					{    
//myCamera.autoFocus(myAutoFocusCallback);
						myCamera.setOneShotPreviewCallback(RectPhoto.this);
						Log.i(tag, "setOneShotPreview...");
					}
					Thread.sleep(1500);
				} catch (InterruptedException e) {
					// TODO Auto-generated catch block
					e.printStackTrace();
					Thread.currentThread().interrupt();
				}
			}
			
		}
		
	}

在onCreate里new Thread(new ScanThread()).start()开启扫描线程。如果想手动触发中止这种扫描活动，可以在ScanThread里的while循环里设置标志位。