使用冰狐智能辅助实现OCR(文字识别)

我们在编写自动化脚本过程中,经常会发现一个控件即没有text也没有id,有的甚至连控件也没有,可能就是一张图片。如果要点击的话如何实现呢?如果有文字的话此时就可以使用OCR来实现,典型的场景,比如有的app没有标准控件或者使用其他方式渲染的ui,甚至整个页面就是一张图片,此时就可以使用OCR来实现。

实现OCR需要两步:

1.请求截屏权限。因为要识别app界面中的文字,所以要先截屏。

2.调用ocr相关api实现文字识别。

OCR文字识别。返回值为数组,里面存放识别到的文本和对应的区域,区域格式为[left, top, width, height](相对屏幕的坐标,不是相对识别区域的坐标)例:[{text:'a', region:[11, 23, 10, 50]}, {text:'b', region:[111, 231, 50, 20]}]。注意:第一次调用前必须先申请截屏权限。

参数:

参数名类型必填说明
leftdouble选填识别区域的left,若取值在[0, 1]之间表示比例,例:0.5表示left位于屏幕x轴中点;若取值大于1表示像素值。
topdouble选填识别区域的top,若取值在[0, 1]之间表示比例,例:0.5表示top位于屏幕y轴中点;若取值大于1表示像素值。
widthdouble选填识别区域的width,若取值在[0, 1]之间表示比例,例:0.5表示width为屏幕的宽度一半;若取值大于1表示像素值。
heightdouble选填识别区域的height,若取值在[0, 1]之间表示比例,例:0.5表示height为屏幕的高度一半;若取值大于1表示像素值。

demo如下:

// 例子:
function main() {
    requestScreenShot();
    var ret = ocr(100, 100, 200, 130);
    console.log('ret:' + ret);
}

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值