Java找图（截屏找图大图找小图）--自己实现“按键精灵”

最新推荐文章于 2024-06-01 17:57:46 发布

编程杂绪

最新推荐文章于 2024-06-01 17:57:46 发布

阅读量4k

点赞数 3

分类专栏： java 文章标签： java opencv

本文链接：https://blog.csdn.net/a1013642808/article/details/116650986

版权

本文介绍如何利用Java和JavaCV库实现在安卓模拟器上进行自动扫码支付的找图定位功能。通过图像模板匹配算法，在大图中找到小图的位置，以模拟点击操作。文章分为新建项目、编写代码和运行结果三个部分，提供了具体的代码示例和运行效果。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

最近老板给了个需求是要做一个在安卓模拟器上自动扫码支付的程序，本来以为用Appium就可以直接直接搞定的，但是最后发现Appium只能操作App，在模拟器的实际运行中App要进入扫码功能，还要点击安卓模拟器的的功能菜单才可以。一开始就想着获取安卓模拟器的窗口句柄来操作点击的，结果发现这个句柄不好获取，最后就无奈采取找图定位功能菜单加模拟点击来实现。

模拟点击是很容易实现的了，Java本身就封装了一个叫Robot的类来实现这些功能，所以难点在于点击的定位，我们的目的是在屏幕中找到我们要点击位置在哪里。以前用过“按键精灵”，记得它的做法通过找图来确定要点击的位置。于是，我们的目标就转变成了，在一个大图中找一个小图，得到它在大图中的位置。

一、新建项目

新建一个Maven项目，导入依赖，我们这里使用JavaCV来实现找图这个功能，要用到图像模板匹配这个算法。

<dependency>
  <groupId>org.bytedeco</groupId>
  <artifactId>javacv-platform</artifactId>
  <version>1.5.5</version>
</dependency>

二、编写代码

代码逻辑非常简单，可以直接复制粘贴使用。

import org.bytedeco.javacpp.DoublePointer;
import org.bytedeco.javacv.Java2DFrameConverter;
import org.bytedeco.javacv.OpenCVFrameConverter;
import org.bytedeco.opencv.opencv_core.*;
import org.bytedeco.opencv.opencv_core.Point;

import javax.imageio.ImageIO;
import java.awt.*;
import java.awt.event.InputEvent;
import java.awt.image.BufferedImage;
import java.io.ByteArrayInputStream;
import java.io.ByteArrayOutputStream;
import java.io.File;
import java.io.IOException;

import static org.bytedeco.opencv.global.opencv_core.CV_32FC1;
import static org.bytedeco.opencv.global.opencv_core.CV_8UC1;
import static org.bytedeco.opencv.global.opencv_core.minMaxLoc;
import static org.bytedeco.opencv.global.opencv_imgcodecs.IMREAD_GRAYSCALE;
import static org.bytedeco.opencv.global.opencv_imgcodecs.imread;
import static org.bytedeco.opencv.global.opencv_imgproc.COLOR_BGR2GRAY;
import static org.bytedeco.opencv.global.opencv_imgproc.COLOR_BGRA2RGBA;
import static org.bytedeco.opencv.global.opencv_imgproc.TM_CCORR_N