问题驱动的软件测试设计 - 概要描述

课程内容下载：问题驱动的软件测试设计

测试用例设计是整个软件测试过程中非常重要的测试活动。测试人员能否进行系统化的测试分析与设计，是实施高效测试的关键因素之一。在软件测试实践中，需求规格说明是测试人员进行测试设计的主要参考输入，而基于被测对象提供的各种规格说明得到的测试用例，在测试覆盖率、测试效率、测试有效性和测试质量等方面的表现却是差强人意。

测试实践中测试人员设计得到的测试用例质量不尽人意的原因，除了过于依赖于需求规格说明作为参考输入之外，另一个重要原因是测试人员在测试设计过程中面临各种各样的挑战，主要表现在：

1.  软件产品的不同利益相关者，其对产品的质量要求是不一样的。而测试人员需要站在不同利益相关者的角度，分析和评估软件产品的各种质量要求。如何确定适合软件产品的质量要求，是测试人员面临的第1个挑战；

2.  针对软件产品的需求经常是不完善的，并且经常发生变更，甚至没有需求文档。而测试人员设计测试用例，需要能够尽量多的获取软件产品的显现需求和隐现需求，而这是测试人员面临的第2个挑战；

3.  针对软件产品的各种输入、各种输入组合和各种组合平台几乎是无穷的，而穷尽测试是不可能的。测试人员需要有效的选择测试输入和测试用例，使之达到测试覆盖率的要求，且能达到测试的有效性，这是测试人员面临的第3个挑战；

4.  测试人员的测试时间和测试资源是非常有限的，而面对的测试范围和测试用例却是非常庞大的。如何更好的选择测试重点和安排测试优先级，在有限的时间、资源的情况下，与测试质量达到有效的平衡，是测试人员面临的第4个挑战；

为了能够有效解决测试设计过程中面临的上述4大挑战，选择和应用合理的测试设计技术是必然的选择。但是测试设计技术本身并不能有效解决上述的问题，它需要和测试对象提供的功能和要解决的问题必须紧密结合。

“问题驱动的软件测试设计”是我在2009年首先主导提出的，它是系统化测试测试设计的一套方法与指南，其中提出了构建测试模型在测试设计过程中的重要作用。测试设计不再是参考需求等输入直接得到测试用例的过程，而应该是如下的一个过程：根据被测对象提供的信息，结合测试设计技术，通过建立测试模型，从测试角度了解测试对象、描述测试对象、分析测试对象，并最终得到验证该测试模型的测试用例的过程。

“问题驱动的软件测试设计”根据测试人员面临的4大挑战入手，选择合适的测试设计技术，结合被测对象的特点，从4个维度构建了测试设计框架：质量要求、功能交互、输入选择和组合、重点选择。同时基于测试设计指南和框架，有效构建测试设计评价体系。通过综合应用测试设计指南和框架，不断提高公司的测试能力，进而提升测试覆盖率、测试效率、测试有效性和测试质量。主要表现在：

1.  通过案例分析，让测试人员明白测试设计为什么这么难？尽管测试人员了解甚至掌握了各种测试设计技术。引出了测试设计过程中构建测试模型的重要作用；

2.  通过案例分析，掌握基于质量特性的测试设计技术，构建适合自己产品的FRESIUP质量模型，让测试人员明白如何更好的从不同用户的角度检查被测对象，以满足不同用户的质量要求；

3.  通过案例分析，掌握基于经验的测试设计技术，以解决由于需求不全、需求变更等问题。同时分享如何更好的积累和总结测试团队的测试经验，根据测试经验挖掘测试对象功能之间和相互交互存在的各种问题；

4.  通过案例分析掌握基于规格说明的测试设计技术，以解决输入和组合太多的问题。有效减少由于参数和平台组合而导致的测试用例数目，同时保证测试设计的有效性；

5.  通过案例分析掌握基于风险的测试设计技术，如何更好的选择测试重点和安排测试优先级，在有限的时间、资源、预算情况下，与测试质量达到有效的平衡；

“问题驱动的软件测试设计”提出之后，在2009年首先在公司的某个项目中进行试点推广[i]。通过对测试结果的分析，测试团队在测试设计效率和有效性方面得到了长足的进步，主要表现在：

1.  可以得到的更多的测试用例，特别是非功能测试用例的数目，从以前的12.55%增加到了23.37%；

2.  提高了测试用例的有效性，测试用例发现缺陷的有效性，特别是非功能缺陷比例，从以前的6.67%增加到了26.94%；

3.  大大减少了遗漏到客户的的缺陷数目（以发布半年之后进行计算），提高了缺陷检测百分比，从以前的81.86%增加到了95.22%；

2013年，通过企业内训和公开课的方式，有超过300位学员参加了“问题驱动的软件测试设计”课程的系统化的培训。从学员和参加培训的公司中反馈中得知，通过该课程课程的2天培训，可以很好的帮助测试人员搭建测试设计的框架和提高测试设计的发散性思维，提高测试人员测试设计技能，助推软件产品质量的提升和加快软件产品的发布。

---

[i] 数据来源：QinLiu, Wenqiang Zheng, JunFei Ma, Improving Test Quality by a Test Type AnalysisBased Method,ssiri, pp.325-328, 2009 Third IEEE International Conference onSecure Software Integration and Reliability Improvement, 2009