测试基础14：测试用例设计方法-正交实验法

课程大纲

1、定义

        正交表是一种在数学和统计学中使用的特殊表格，用于设计实验，以在有限的测试次数下获得最大的测试覆盖率。

        它通过均衡搭配的特性，从全面试验中挑选出有代表性的点进行测试。

2、应用场景

        适用于配置类软件中组合比较多的情况。与判定表对比，输出结果不复杂，不会因组合不同有非常大差异。（如：多个单选下拉框、选项多的单选框组合）

3、正交表公式

正交表分为2类：

        1.单一水平正交表：每个控件取值个数相同；

        2.混合水平正交表：每个控件取值个数不同。

3.1单一水平正交表

公式：Ln(m^k)

即：L正交表行数(控件取值个数^控件个数)

L表示正交表。

n表示正交表的行数，即需要测试的组合次数。

表格行数：n=k*(m-1)+1

k表示正交表的列数，即控件的个数。（k个单选框）

m表示每个控件包含的取值个数。（每个控件都有m个取值）

        例如，L9(3^4)表示一个正交表，需要进行9次测试，涉及4个控件，每个控件有3个取值。

3.2混合水平正交表

公式：Ln(m1^k1m2^K2…mx^kx)

m1k1: k1个控件有m1个选项；

m2k2: k2个控件有m2个选项；

m3k3: k3个控件有m3个选项。

表格行数：n=k1*(m1-1)+k2*(m2-1)+…kx*(mx-1)+1

4、正交实验法的优缺点

优点：

        1.可控制生成的测试用例的数量，有效减少需要执行的用例（/场景/组合）数。

        2.测试用例具有一定的覆盖率。正交表均匀分散、整齐可比，保证实验结果的代表性和可比性。

        3.节省测试工作工时。

缺点：

        1.重点不突出。每个取值同等对待，重点不突出，导致在用户不常用的功能/场景上浪费不必要的工作量。

        2.易遗漏测试场景，需使用错误推断法等增加测试用例。

        3.常见正交表少、固定，对控件要求高。目前常见的正交排列表只有固定的几种，即使是已有的正交排列表，基本都要求每个控件中取值的个数要相等，这在实际软件中很少遇到。

5、设计步骤

step1.确定控件数量。

step2.确定控件取值数量。

step3.选择一个合适的正交表：对比正交表行数，选择行数最少的表。

常用的正交表（来自网络）：http://support.sas.com/techsup/technote/ts723_Designs.txt

step4.把变量的值映射到表中。

step5.把每一行的各因素水平的组合作为一个测试用例。

step6.根据实际情况，补充用例。

举例：

        注册界面3个输入框：用户名、密码、手机号，每个控件都有2种输入取值：填、不填。设计测试用例。

6、工具

        目前有很多已有工具可直接进行正交表用例设计：在线工具SPSSAU、Windows工具allpairs、代码实现。现介绍前两种工具操作方法。

6.1在线SPSSAU

地址：https://spssau.com/indexs.html

使用方式：

        完全符合正交表的规范组合，直接导出替换value。否则，会给出最接近的正交表，需要自行优化表格。

 缺点：有免费试用次数限制，超出后需要购买会员。

6.2Windows工具：allpairs

下载地址：

https://www.softpedia.com/get/Programming/Other-Programming-Files/Allpairs.shtml

使用方式：

        1.将控件及各控件取值写入Excel表格，复制到txt文件（也可直接写入txt文件）。

        如下，写入get_case.txt，文件放在软件目录下。

        2.cmd进入工具目录，执行命令：allpairs.exe get_case.txt>get_case1.txt

        3.绿色框选即为生成的用例文件。如目录下无目标文件，会自动创建；如已存在，每次执行命令新结果会覆盖上一次结果。

        特别的，当出现不符合标准正交表时，也可自动生成用例，带“~”标志的项说明此项填任意可选值均可，同时系统会自动选定一个值，可直接使用，也可修改。如下示例。

控件及取值文件：

正交用例结果：

        建议：正交实验法只要使用工具能够快速输出组合即可，实际工作场景使用不多，使用该方法的功能大多为配置类功能，可不深究正交表的推导和理解。

附：课程完整思维导图