在测试执行过程中,经常会碰到一些不可重现或者很难重现的缺陷,特别是在进行系统的非功能性测试的时候,例如:稳定性测试、压力测试、满配置测试、兼容性测试等。在非功能性测试过程中发现的缺陷往往是严重程度比较高的,例如:系统不稳定、系统在不可预测的时候重启等。假如软件产品交付给用户之后,在用户现场或者系统运行过程中出现由于这样的缺陷而导致的失效,那么将会大大影响用户对产品的信心。
虽然有的组织和项目可能不统计无法重现或很难重现的缺陷,甚至忽视难以重现的缺陷。但是笔者认为,针对难以重现的缺陷,可以采取以下措施改进测试的效率和有效性:
虽然有的组织和项目可能不统计无法重现或很难重现的缺陷,甚至忽视难以重现的缺陷。但是笔者认为,针对难以重现的缺陷,可以采取以下措施改进测试的效率和有效性:
- 尽量获取系统的打印信息和DEBUG信息;
- 测试人员应该报告不可重现的缺陷;
- 在产品操作指南(使用说明)中明确告知客户;