opencv制作微信小游戏 最强连一连 辅助(5)--adb模拟触摸屏幕点击加速

上几章 讲到 通过adb shell input tap x y 进行模拟触摸的速度是非常的慢的,差不多0.8s左右完成一次点击.

那么如何进行加快了?

在网上搜了下,大多是用dd命令记录触摸事件 对一个点触摸进行加速. 不符合 直接pass

既然是通过触摸事件加速

那就深入了解 触摸事件 ,整理了 资料,汇总如下

---

还记得我上一篇文章的唠嗑么,我说过其实我们的安卓手机本身就是一个linux,他和阿里云,腾讯云主机没有太大的区别

android本身就是针对linux的定制开发,同时安卓还支持了一些常用的硬件,比如指纹传感器,光线传感器,摄像头,屏幕等等

ok,那应该怎么看了? 其实adb工具都提供了.

以我的手机三星为例

adb链接手机,输入

adb shell getevent -p

返回结果如下

可以看到很多的传感器,其中我们注意的是 第六个 名称是 sec_touchscreen

通过名称可以猜到这个就是屏幕了.

它对应的设备路径是 /dev/input/event2

为什么设备对应一个文件,想起了大一看小甲鱼的视频,视频里面的一句话:万物皆文件.

比如屏幕,往文件里面写入东西就会显示在屏幕上 等等,这个有兴趣大家可以去研究下.

屏幕设备一共有几个属性说明一下

name
events
events下面还有3个
       KEY
       ABS
       SW
input props

具体的大家有空研究下.

这里我们要关心的
ABS(0003)中的中的 0035 和 0036 中的 min 和 max

0035  : value 0, min 0, max 4095, fuzz 0, flat 0, resolution 0
0036  : value 0, min 0, max 4095, fuzz 0, flat 0, resolution 0

这4个值 经过我的验证就是 屏幕的x坐标和y坐标的 最小值和最大值

一个新的问题来了,我现在手机的分辨率是2220*1080

按道理 上面的 0035 和0036 的 max的值 应该比例和这个一样才对

但是上面的返回结果 最大值和最小值都是一样的.都是0 和 4095

当时我就尝试了一下,分别把求得的xy坐标 按照屏幕分辨率的比例 映射到4096的级别,结果发现是成功的.
即屏幕分辨率的坐标是(x,y)
那么触摸事件的坐标就是(x/2220x4096,y/1080x4096)

ok

坐标确定了,我们接着来看看怎么确定点击事件,以及如何进行点击事件的模拟

输入命令

adb shell 

进入安卓的命令行

输入

getevent  

然后快速的点击屏幕的任意一个地方,注意速度要快,越快越好,要不然会产生很多的数据

大体返回结果如下

可以看到即使我点击的已经非常快了,但是还是有一些多余的数据,比如里面有多的035 036 我们关心淡蓝色的框子就ok

0000 一般是一个事件结束的标志,也就是淡蓝框最后一行数据

可以看到这些数据一共是4列

第一列是设备的文件路径
第二列是事件type,按照他的值来看的话 ,是上面的events下面的3个属性
第三列是事件code,是数字
第四列是事件的值

ok,大家可以查一下事件code对应的事件名称是什么,如果不想这么麻烦的话,可以换一个命令

getevent -l

再来看一下

右边一个窗口是getevent -l 返回的结果,最大的不同在于 右边是事件名称方便观看

可以看到我们我们的手指在屏幕上快速的点击一下,就产生了这么多的点击事件,

这些数据中我们已经过滤掉了一些 但其实还是可以再精简一点 ,当然不去也行的,精简一点比较好

比如第一行 事件id

/dev/input/event2: 0003 0039 0000a47d

比如第三行 BTN_TOOL_FINGER

/dev/input/event2: 0001 0145 00000001

等等,这些都可以删掉

这个大家可以根据上图右侧事件的名称去查询,看看哪些事件是可以不要的

我把结果说下,最后精简版 完成一次点击需要6条命令,获取数据是getevent,发送事件就用到sendevent

6条精简命令如下:

sendevent /dev/input/event2 3 53 3040 
sendevent /dev/input/event2 3 54  2614  
sendevent /dev/input/event2 1 330 1
sendevent /dev/input/event2 0 0 0
sendevent /dev/input/event2 1 330 0
sendevent /dev/input/event2 0 0 0

完成一次点击,至少需要这6条命令

对了需要注意下,我们通过getevent获取的数据 比如035 036 这些都是16进制的,sendevent的时候需要转换成10进制 ,比如0x35=53d,

在通过sendevent把这些数据发送到手机,就可以完成一次屏幕的触摸了.

通过测试发现,用sendevent来模拟屏幕的触摸速度要快很多,是通过adb shell input tap x y的好几倍

---

到这里基本上就结果了,但是我还想在唠嗑唠嗑

看看还能不能再快一点.

还是之前的那句话,我们的android本身是一个linux系统,我们在电脑上通过adb可以在手机上执行linux命令,

但是每次都用adb shell 这些命令还要通过数据线传到手机里面才能执行,usb通信也是需要时间的,而且每次通信都会打开和关闭usb传输

为什么不一次性传到手机试试了,

于是又发现了几个命令

adb push
//发送电脑文件到手机

abd adb shell sh 
//执行手机里面的脚本文件

这样的话 速度理论上是可以提快一点的.

好的,到这里就结束了,大学毕业工作后就搞java了 好久不碰opencv,c++了

再次感谢B站up主python开源的代码,让我有兴趣研究看看.

最后放上我写的c++源代码供大家参考下

代码写的比较仓促,大家参考参考就行

完整代码:

https://github.com/897180673/WeChatLookAndMatch

大家加油!