APP UI 真的可以实现自动化测试吗?

原创 2017年11月08日 00:00:00

本文来自作者 我是坏蛋 在 GitChat 上分享「论 APP UI 自动化测试的可行性」,阅读原文」查看交流实录

文末高能

编辑 | 家辉

背 景

在这个科技时代,app 数量也是逐年递增,只要能想到,大多数都可以在相应的平台找到相关的 app!

那一款 app 在市场上出现之前,会经过哪些「加工锻造」的过程呢?又经过哪些流程,来确保从市场上下载下来的 app 能正常使用呢?

在这里我,以测试的视角来说我对 app 一些粗浅认知,在这过程一些意见,纯属个人臆断,如有不对欢迎指正!

不管是何种事物的产生,都是基于需求,有需求才能存在发展的内在驱动力,因此 app 的产生的第一阶段是需求;

有了需求就要基于该需求,调查市场上的用户的群体,分析获取用户的功能性需求,设计 app 的功能性需求,因此这一阶段为产品设计;

根据产品的文档,开始 app 的制作加工阶段,这个阶段不展开解说,包括内容太多,例如开发框架的选择、UI 设计、编码等等,这个阶段为 app 设计与实现阶段;

根据 app 设计与实现完成,要确保能正常使用,需要进行相应的测试,该阶段称为 app 测试阶段;

测试完成之后,app 上线,至此一个 app 的产生就完成了,至于市场运营,那是以后的事情了!

因此,app 的加工锻造的过程,大致为:获取市场需求、提取需求设计产品文档、根据需求设计并实现 app、app 测试、app 上线!

本篇文章,是针对 app 测试阶段中的 UI 自动化测试的可实施性进行分析作为背景,从需求、技术、维护三个阶段来分析 UI 自动化测试在 app 的可行性!

需求变更频繁

不管是测试还是开发,所有的出发点都是基于需求,那么目前市场上一些app,为了保持用户的新鲜感,不断的更新版本,来确保用户获得更好的体验!

在 App 每个版本更新过程中,一些功能入口会发生变化、页面的一些元素会发生变化、之前有的一些功能会被替换掉、增加新的功能等!

这点对于自动化测试是致命的威胁,目前自动化测试都是通过编码实现的,来实现模拟用户点击行为。

一旦 app 进行版本更新,就要对自动化脚本进行维护,维护成本比较高,由于需求变更频繁,造成开发完成,后期没人维护,被废弃。

不过这可不是来说通我们的 boss,放弃 App UI 自动化测试想法的重要砝码!

他们会给你新的想法,不过这些想法,有时候会让我头疼,但是他们说的确实在理,无法反驳,那就按着他们的想法去试试,万一成功了呢?

这不是发现了测试中的一个新大陆吗,对自己的能力增长那是很大的不是吗?

就以我遇到的一些问题为例,每个 App 产生的时候,都有自己的一些核心业务,后期的版本更新都是基于这些核心业务来扩展设计新的功能。

这些核心业务基本很少甚至不发生变化,那么能不能对于 app 中成熟的业务来设计 UI 自动化测试用例呢?

那么对于这个想法,我做了如下尝试,把遇到坑归纳如下:

· 核心业务是否有单独稳定的UI入口?

核心业务是否有单独稳定的 UI 入口,这是重中之重,这能保证测试的正常进行,自动化测试的初期,都是对业务流进行梳理分析,选择一些成熟稳定的业务流!

这么做的好处主要有:需求变更对业务流影响较少、有效的数据比较多、业务之间的边界清晰!

如果核心业务没有单独稳定的入口,那么 UI 的自动化还没开始就会遭遇滑铁卢,因为入口变更频繁的话的,那么业务流就无法成功走下去,后续的测试用例也无法成功执行!

其实测试做到后期,都有个认识,UI自动化测试都是基于业务流的测试,业务流发生变化,直接影响的是一个测试集的,因此针对 APP 的 UI 自动化测试而言,业务流的选择是基石!

· 一些开发的编码格式是否规范?

开发人员的编码规范与否,对于自动化测试的也是有一定影响的,规范的编码,对于后期的技术实现影响是相当大的。

所以早期,最好能与开发协商,你测试过程中需要的一些元素属性一定不能为空,方便后期元素定位,因此开发人员编码规范也是相当重要的!

· App 开发框架更新?

APP开发框架一般对于业务流影响不大,可能会影响部分测试集中的测试用例,导致测试用例无法正确执行,这个影响程度要看测试用例的数量,因此这个对UI自动化影响大小看情况而定!

因此,根据上述可以看出,APP UI自动化测试可行性在一些场合下是可行,在一些场合下是不可行的!

可行场景:产品变动小、页面UI改动小,这些是可以做的;其他一些可以通过接口测试,来实现业务的自动化! 

APP UI自动化技术

目前市场上主流的 APP UI 自动化工具包括 Appium、UiAutomator、UIAutomation、XCUITesting 等等。

这些自动工具都是通过页面元素一些属性来定位页面元素,来实现用户一些日常操作行为的模拟操作,元素点击、拖动、截图等!

那下面以 Appium 这个目前最火一款工具,来分析它有哪些弊端。

环境部署

针对 Appium 环境部署,这里不讲如何安装配置,如果想学习 Appium+Python 在 Windows 下面的安装,这里给我之前的一篇博客链接:(http://blog.csdn.net/henni_719/article/details/51682081)

这个安装方法,我试过,是可以成功安装,如果在安装过程遇到一些问题,可以在该博客下留言,我会及时回复的!

本人在刚开始,配置部署这个开发环境时,就踩了好多坑,环境配置是我目前最麻烦的之一,比 Spark 集群稍微简单点,但是它的需求太多,好多想要使用该工具的人,估计 90% 的人被环境配置难住!

环境配置结束之后,那就是需要跑一个测试,来了解下简单的操作流程。本文不做赘述,链接:appium 简单实例( http://blog.csdn.net/henni_719/article/details/51722043 )

示例代码:

元素定位

接触过 selenium 的,对于元素定位,以 Python 语言为例给出方法名称:

  • find_element_by_id( ):根据元素的 id 属性进行定位;  

  • find_element_by_name( ):根据元素的 name 属性进行定位;

  • find_element_by_class_name( ):根据元素的 class 属性值进行定位;

  • find_element_by_tag_name( ):根据元素的 tag 名进行定位;

  • find_element_by_link_text( ):根据链接文本进行定位;

  • find_element_by_partial_link_text( ):根据链接文本中包含的部分文本信息进行定位

  • find_element_by_xpath( ):根据 xpath 进行定位;

  • find_element_by_css_selector( ):根据 css 进行定位;

关于定位元素组的,只需要把 find_element 改成 find_elements 就可以。

上述是 selenium 的定位方法,目前 IOS 使用 XCUITesting 后,元素定位方法与 selenium 元素定位方法一致。

这是 Appium+XCUITest 的 Python 链接:

Appium+XCUITest 基于 Python 的操作实例以及环境搭建(http://blog.csdn.net/henni_719/article/details/62037676)

那么 appium 如何在安卓设备上进行定位呢?

在安卓设备上使用的是 uiautomator,以 Python 为例,使用方法如下:find_element_by_android_uiautomator ( ),该方法与 Uiautomator 的 UiSelector( ) 联合使用来定位元素。

下面给出一段代码示例截图:

    

可以查看我的博客链接:python 封装安卓查找元素方法V1.0(http://blog.csdn.net/henni_719/article/details/65630889)    

性能

appium 对设备的要求比较高,如果设备配置的比价低的,运行脚本时会相当卡顿,不能及时响应操作,总体来说性能不怎么好!

使用难度

从环境的配置,到编码的使用,都要求较高,需要有一定的编码基础,不然很难入门使用,所需要花费的成本较高!

不过可以与 robot framework 结合使用,使用者不需要关心后台代码逻辑!关于如何与 robot framework 可以从网上查找,比较多的!

针对上述可以发现,app UI自动化测试上技术是可行的,不过对于测试人员的技术要求比较高,学习成本比较大!需要专业的人员指导,才能顺利实施!

关于在 windows 下对安卓进行的自动化测试,我做了做了一个研究,把 adb+python 结合起来,把 adb 的命令和 Python 结合起来,来实现元素点击操作,具体代码链接:通过 adb 与 python 结合创建的设备驱动脚本 deviceDriver.py

部分代码截图:

改脚本实施原理是,通过 adb 命令把设备当前页面的信息 dump 下来保存为 xml 文件,通过 xml 的树定位元素在页面所在的位置,具体可以看上述代码链接。

具体实施是可行的,只要是页面中有都可以定位点击,准确度和性能都不错!

缺点是需要 adb 支持,不支持ios。我把该脚本封装好,与robot framework结合起来,链接:与 robot framework 结合起来( http://blog.csdn.net/henni_719/article/details/73087463 )

自化测试脚本维护

在需求稳定,页面稳定的时候,自动化测试脚本维护成本比较低;在需求变化比较频繁、页面变化比较大,维护成本比较高!

自动化测试脚本,也需要定期的进行迭代管理,需要制定合理规范化的管理流程!

要有规范化的测试用例编写规范、测试集模块功能介绍、各测试集管理人员、操作手册等相关文档,避免人员在流失导致自动化测试脚本废弃!

脚本维护,是保存自动化测试持续的必要条件,人员流失、文档少,是自动化测试脚本废弃的主要问题!

总结

其实,在研究 app UI 自动化测试可行性分析,发现最大的问题是:入口和UI经常变化、时间紧,导致维护成本高!

其实,app UI 自动化脚本开发都是提高工作质量,但是由于 app 更新频次快,时间紧,手动测试比较自由及时,使用脚本还要去调试校验、编写代码,比较耗时!

总而言之,APP UI 自动化因公司而定,如果有规范化的管理流程,自动化测试在回归测试方面还是很高效的!

福利

「阅读原文」看交流实录,你想知道的都在这里

版权声明:本文为GitChat作者的原创文章,未经 GitChat 允许不得转载。

一个小公司怎么实现APP的UI自动化测试

作为一个在软件和互联网行业浸润了20年的老兵,我接触了很多公司,也面试了很多人,发现国内现在能实现APP的UI自动化测试的公司很少,我的一个之前在淘宝测试团队工作的同事也讲,在淘宝也是部分实现了自动化...
  • huangyuncong
  • huangyuncong
  • 2017年03月13日 11:44
  • 6726

移动APP自动化测试框架对比

简介  移动APP的UI自动化测试长久以来一直是一个难点,难点在于UI的”变”, 变化导致自动化用例的大量维护。从分层测试的角度,自动化测试应该逐层进行。最大量实现自动化测试的应该是单元测试,最...
  • xiaoyida11
  • xiaoyida11
  • 2016年10月20日 18:34
  • 5811

手把手教你Android标准App的四大自动化测试法宝

作者:Ringoyan,腾讯测试开发工程师。先后为植物大战僵尸Online,糖果传奇等游戏担任测试经理,其负责的“我叫MT2”测试项目曾获腾讯互动娱乐精品文化奖银奖。目前担任腾讯WeTest测试经理。...
  • wetest_tencent
  • wetest_tencent
  • 2016年09月01日 20:25
  • 12082

Android 程序员必须掌握的三种自动化测试方法

http://www.cnblogs.com/punkisnotdead/p/5103323.html 在日常的开发中,尤其是app开发,因为不像web端那样 出错以后可以热...
  • whatnamecaniuse
  • whatnamecaniuse
  • 2016年09月06日 17:16
  • 5368

六款Android 应用的自动化测试工具

如今自动化测试已经应用到每天的测试中。这不足为奇,因为自动化测试在测试过程中节约了时间,还能避免包括人为因素造成的测试错误和遗漏。        自动化测试工具选择很多。一些是开源的,一些非常贵。一...
  • lb245557472
  • lb245557472
  • 2017年06月02日 14:43
  • 1468

解放双手——Android自动化测试

人们懒的走路,才创造了汽车; 人们懒的爬楼,才创造了电梯; 人们懒的扫地,才创造了自动扫地机器人。 人类的进步,离不开这些喜欢偷懒的人,现在,程序猿将偷懒上升到了一个新的高度——利用程序来进行自动化软...
  • x359981514
  • x359981514
  • 2015年05月11日 16:42
  • 46850

app与后台交互以及web与后台交互的比较(app简单测试环境)

前言: 以前的工作一直做的是web方面的测试工作,性能测试也主要是模拟web端向服务器发送http请求。对app这一块的体系和框架了解比较少。由于下一份工作主要是测试app服务器的性能。就在网上找了一...
  • g695144224
  • g695144224
  • 2016年04月02日 23:20
  • 7888

Android标准App的四大自动化测试

WeTest导读 说起Android的自动化测试,相信有很多小伙伴都接触过或者有所耳闻,本文从框架最基本的功能介绍及API的使用入手,结合简单的项目实战来帮忙大家对该框架进一步理解和加深印象。下...
  • n8765
  • n8765
  • 2017年01月03日 11:26
  • 3356

使用Python进行自动化测试

目前大家对Python都有一个共识,就是他对测试非常有用,自动化测试里Python用途也很广,但是Python到底怎么进行自动化测试呢?今天就简单的向大家介绍一下怎么使用Python进行自动化测试,本...
  • xc5683
  • xc5683
  • 2013年04月09日 20:49
  • 61902

android app自动化测试框架Appium资料整理

by Ruiming.Lv 1   自动化测试 1.1    自动化测试简介 自动化测试是把以人为驱动的测试行为转化为机器执行的一种过程。从广义上来讲,一切通过工具(程序)的方式...
  • maetelibom
  • maetelibom
  • 2016年06月01日 18:03
  • 11552
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:APP UI 真的可以实现自动化测试吗?
举报原因:
原因补充:

(最多只允许输入30个字)