不知不觉,我已经介绍完了 GUI 测试相关的知识点,你可以先回顾一下这些知识点,是否还有不清楚的地方,也欢迎你给我留言进行讨论。同时,我希望这些知识点,已经帮你搭建了 GUI 自动化测试的知识体系。
那么,今天我将从实际工程应用的角度,和你一起聊聊 GUI 测试的稳定性问题。
如果你所在的公司已经规模化地开展了 GUI 测试,那我相信你们也一定遇到过测试稳定性的问题。GUI 自动化测试稳定性,最典型的表现形式就是,同样的测试用例在同样的环境上,时而测试通过,时而测试失败。 这也是影响 GUI 测试健康发展的一个重要障碍,严重降低了 GUI 测试的可信性。
所以,今天我分享的主题就是,如何提高 GUI 测试的稳定性。虽然从理论上来讲,GUI 测试有可能做到 100% 稳定,但在实际项目中,这是一个几乎无法达到的目标。根据我的经验,如果能够做到 95% 以上的稳定性,就已经非常不错了。
要提高 GUI 测试稳定性,首先你需要知道到底是什么原因引起的不稳定。你必须找出尽可能多的不稳定因素,然后找到每一类不稳定因素对应的解决方案。
为此,根据我的实践经验,以及所遇到的场景,我为你总结了五种造成 GUI 测试不稳定的因素:
-
非预计的弹出对话框;
-
页面控件属性的细微变化;
-
被测系统的 A/B 测试;
-
随机的页面延迟造成控件识别失败;
-
测试数据问题。
并且,我提供了针对这五种不稳定因素的解决思路。