【Android】在Android上使用mlKit构建人脸检测程序

在Android上构建人脸检测程序

目录

1、导入mlKit依赖包

dependencies {
  // ...
  // Use this dependency to bundle the model with your app
  implementation 'com.google.mlkit:face-detection:16.1.5'
}

依赖地址:mlkit

2、配置人脸检测器并且获取人脸检测器

// 1、配置人脸检测器
FaceDetectorOptions faceDetectorOptions = new FaceDetectorOptions.Builder()
        .setPerformanceMode(PERFORMANCE_MODE_FAST)
        .build();
//2、获取人脸检测器
FaceDetector detector = FaceDetection.getClient(faceDetectorOptions);

人脸检测器Api有如下,这里使用了最简单的作为样例:

3、加载图片资源

// 3、从资源中加载图片
bitmap = BitmapFactory.decodeResource(getResources(), R.drawable.test3);
imgView.setImageBitmap(bitmap);
InputImage image = InputImage.fromBitmap(bitmap, 0);

这里使用Bitmap,将图片进行转化,然后制作成InputImage流。

4、调用人脸检测器

// 4、处理图片
  detector.process(image)
          .addOnSuccessListener(new OnSuccessListener<List<Face>>() {
              @Override
              public void onSuccess(List<Face> faces) {
                  Log.e("TAG", "onSuccess: " + 1);
                  imgView.setImageBitmap(drawWithRectangle(faces));
              }
          })
          .addOnFailureListener(new OnFailureListener() {
              @Override
              public void onFailure(@NonNull Exception e) {
                  Notice();
              }
          });

5、绘制矩形边框

private void Notice() {
    Toast.makeText(this, "识别失败", Toast.LENGTH_SHORT);
}

/**
 *
 * 为人脸绘制边框
 *
 * @param faces 采集的人脸
 * @return {@link Bitmap}
 */
private Bitmap drawWithRectangle(List<Face> faces) {

    //复制一个新的Bitmap
    Bitmap copiedBitmap = bitmap.copy(bitmap.getConfig(), true);;

    for (Face face : faces) {
        //获取边界状态
        Rect bounds = face.getBoundingBox();
        // 初始化Paint
        Paint paint = new Paint();
        // 设置矩形颜色
        paint.setColor(Color.BLUE);
        // 设置绘制样式为轮廓绘制
        paint.setStyle(Paint.Style.STROKE);
        // 设置为你需要的宽度
        paint.setStrokeWidth(10);

        Canvas canvas = new Canvas(copiedBitmap);
        canvas.drawRect(bounds, paint);
    }
    return copiedBitmap;
}

6、完整代码

import static com.google.mlkit.vision.face.FaceDetectorOptions.PERFORMANCE_MODE_FAST;

import android.graphics.Bitmap;
import android.graphics.BitmapFactory;
import android.graphics.Canvas;
import android.graphics.Color;
import android.graphics.Paint;
import android.graphics.Rect;
import android.os.Bundle;
import android.util.Log;
import android.view.View;
import android.widget.Button;
import android.widget.ImageView;
import android.widget.Toast;

import androidx.annotation.NonNull;
import androidx.appcompat.app.AppCompatActivity;

import com.google.android.gms.tasks.OnFailureListener;
import com.google.android.gms.tasks.OnSuccessListener;
import com.google.mlkit.vision.common.InputImage;
import com.google.mlkit.vision.face.Face;
import com.google.mlkit.vision.face.FaceDetection;
import com.google.mlkit.vision.face.FaceDetector;
import com.google.mlkit.vision.face.FaceDetectorOptions;

import java.util.List;

public class MainActivity extends AppCompatActivity {

    private ImageView imgView;
    private Bitmap bitmap;

    @Override
    protected void onCreate(Bundle savedInstanceState) {
        super.onCreate(savedInstanceState);
        setContentView(R.layout.activity_main);

        imgView = findViewById(R.id.imageView);
        Button button = findViewById(R.id.button);

        button.setOnClickListener(new View.OnClickListener() {
            @Override
            public void onClick(View view) {

                // 1、配置人脸检测器
                FaceDetectorOptions faceDetectorOptions = new FaceDetectorOptions.Builder()
                        .setPerformanceMode(PERFORMANCE_MODE_FAST)
                        .build();
                //2、获取人脸检测器
                FaceDetector detector = FaceDetection.getClient(faceDetectorOptions);

                // 3、从资源中加载图片
                bitmap = BitmapFactory.decodeResource(getResources(), R.drawable.test3);
                imgView.setImageBitmap(bitmap);
                InputImage image = InputImage.fromBitmap(bitmap, 0);

                // 4、处理图片
                detector.process(image)
                        .addOnSuccessListener(new OnSuccessListener<List<Face>>() {
                            @Override
                            public void onSuccess(List<Face> faces) {
                                Log.e("TAG", "onSuccess: " + 1);
                                imgView.setImageBitmap(drawWithRectangle(faces));
                            }
                        })
                        .addOnFailureListener(new OnFailureListener() {
                            @Override
                            public void onFailure(@NonNull Exception e) {
                                Notice();
                            }
                        });
            }
        });

    }

    private void Notice() {
        Toast.makeText(this, "识别失败", Toast.LENGTH_SHORT);
    }

    /**
     *
     * 为人脸绘制边框
     *
     * @param faces 采集的人脸
     * @return {@link Bitmap}
     */
    private Bitmap drawWithRectangle(List<Face> faces) {

        //复制一个新的Bitmap
        Bitmap copiedBitmap = bitmap.copy(bitmap.getConfig(), true);;

        for (Face face : faces) {
            //获取边界状态
            Rect bounds = face.getBoundingBox();
            // 初始化Paint
            Paint paint = new Paint();
            // 设置矩形颜色
            paint.setColor(Color.BLUE);
            // 设置绘制样式为轮廓绘制
            paint.setStyle(Paint.Style.STROKE);
            // 设置为你需要的宽度
            paint.setStrokeWidth(10);

            Canvas canvas = new Canvas(copiedBitmap);
            canvas.drawRect(bounds, paint);
        }
        return copiedBitmap;
    }

}

在相机中识别也是同样的方法,只不过换成相机的视频流。

7、效果展示

  • 12
    点赞
  • 13
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 5
    评论
ML Kit是Google推出的一个移动端机器学习框架,可以方便地实现人脸识别和姿势检测。下面是实现人脸识别和姿势检测的详细步骤: 1. 在Android Studio中创建一个新的项目,将minSdkVersion设置为21或更高版本。 2. 在项目的build.gradle文件中添加以下依赖项: ``` dependencies { implementation 'com.google.firebase:firebase-ml-vision:24.0.3' } ``` 3. 配置Firebase ML Kit。在Firebase控制台中创建一个新的项目,并启用ML Kit API。然后将google-services.json文件下载到您的项目中。 4. 为了实现人脸识别,您需要在布局文件中添加一个SurfaceView用于显示照相机预览,并在Activity中实现相机预览和人脸检测。以下是一个简单的示例: ``` public class MainActivity extends AppCompatActivity { private CameraSource cameraSource; private CameraSourcePreview preview; private GraphicOverlay graphicOverlay; @Override protected void onCreate(Bundle savedInstanceState) { super.onCreate(savedInstanceState); setContentView(R.layout.activity_main); preview = findViewById(R.id.camera_preview); graphicOverlay = findViewById(R.id.face_overlay); // 创建一个人脸检测器 FaceDetector faceDetector = new FaceDetector.Builder(this) .setTrackingEnabled(false) .build(); // 创建一个相机源 cameraSource = new CameraSource.Builder(this, faceDetector) .setRequestedPreviewSize(640, 480) .setFacing(CameraSource.CAMERA_FACING_FRONT) .setAutoFocusEnabled(true) .setRequestedFps(30.0f) .build(); // 启动相机预览 preview.start(cameraSource); // 添加一个人脸检测器工具 FaceGraphic faceGraphic = new FaceGraphic(graphicOverlay); graphicOverlay.add(faceGraphic); // 设置人脸检测回调 faceDetector.setProcessor(new Detector.Processor<Face>() { @Override public void release() { graphicOverlay.clear(); } @Override public void receiveDetections(Detector.Detections<Face> detections) { // 获取人脸检测结果 SparseArray<Face> faces = detections.getDetectedItems(); if (faces.size() > 0) { Face face = faces.valueAt(0); // 更新人脸检测器工具 faceGraphic.update(face); } else { faceGraphic.setFace(null); } } }); } } ``` 5. 为了实现姿势检测,您需要在布局文件中添加一个ImageView用于显示姿势检测结果,并在Activity中实现姿势检测。以下是一个简单的示例: ``` public class MainActivity extends AppCompatActivity { private FirebaseVisionPoseDetector poseDetector; private ImageView poseImageView; @Override protected void onCreate(Bundle savedInstanceState) { super.onCreate(savedInstanceState); setContentView(R.layout.activity_main); poseImageView = findViewById(R.id.pose_image); // 创建一个姿势检测器 poseDetector = FirebaseVision.getInstance().getPoseDetector(); // 加载要检测的图像 Bitmap bitmap = BitmapFactory.decodeResource(getResources(), R.drawable.pose_image); // 创建一个FirebaseVisionImage对象 FirebaseVisionImage image = FirebaseVisionImage.fromBitmap(bitmap); // 进行姿势检测 poseDetector.detectInImage(image) .addOnSuccessListener(new OnSuccessListener<List<FirebaseVisionPose>>() { @Override public void onSuccess(List<FirebaseVisionPose> poses) { // 获取第一个姿势检测结果 FirebaseVisionPose pose = poses.get(0); // 获取姿势检测结果的角度 float leftShoulderAngle = pose.getPoseLandmark(FirebaseVisionPoseLandmark.LEFT_SHOULDER).getInFrameLikelihood(); float rightShoulderAngle = pose.getPoseLandmark(FirebaseVisionPoseLandmark.RIGHT_SHOULDER).getInFrameLikelihood(); // 根据角度更新姿势检测结果 if (leftShoulderAngle > 0.5 && rightShoulderAngle > 0.5) { poseImageView.setImageResource(R.drawable.correct_pose_image); } else { poseImageView.setImageResource(R.drawable.incorrect_pose_image); } } }) .addOnFailureListener(new OnFailureListener() { @Override public void onFailure(@NonNull Exception e) { // 处理姿势检测失败的情况 } }); } } ``` 这些是实现人脸识别和姿势检测的基本步骤。您可以根据您的需求进行更改和扩展。
评论 5
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

摸鱼小小虫

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值