一、PICT是什么❓
“PICT工具”是针对“pairwise testing”实现的测试用例设计工具。通过他,我们可以直接将“正交表”转换为测试用例。pairwise testing直译中文是“成对测试”,是一种正交分析的测试技术。
“pairwise testing”能够覆盖因子取值的所有两两组合。在实际对缺陷的统计分析发现,相对于多因子的组合,大部分问题是可以通过因子的两两组合来发现,多个因子组合仅会发现少量的问题,但是多个因子的测试投入却是巨大的。所以来说,两两组合可以更有效的发现缺陷。
二、PICT的安装
1.Windows操作系统
下载地址: http://www.pairwise.org/pict/win/pict.exe,双击安装即可。
下载成功后,将pict工具解压后放在c:\PICT目录下
2. Mac系统
第一种方式:使用brew安装
终端直接输入:brew install pict
效果如下:
第二种方式:源码编译 (我没有尝试过,读者可以自行尝试)
先克隆到本地:git clone https://github.com/microsoft/pict.git
然后进行编译 : make
cp pict /usr/local/bin
# brew 安装
$ brew install pict
# Mac、Linux 平台源码编译
$ git clone https://github.com/microsoft/pict.git
$ make
$ cp pict /usr/local/bin
# 用法
$ pict
Pairwise Independent Combinatorial Testing
用法: pict 模型文件 [参数]
参数:
/o:N - 组合覆盖维度 (默认: 2)
/d:C - 参数值分隔符(默认:,)
/a:C - 别名分隔符(默认:|)
/n:C - 非法值前缀(默认:~)
/e:file - 定义随机种子文件
/r[:N] - 定义随机种子,N-种子值
/c - 指定模型计算时大小写敏感(默认不敏感)
/s - 显示模型的统计信息
三、PICT的使用
比如,我们要分析的因子表是这样的:
根据上面的因子表,我们现在将以数据按照下面的格式写入一个文件中,文件名为testpict.txt
factor A: A1,A2
factor B: B1,B2,B3
factor C: C1,C2,C3,C4
factor D: D1,D2,D3
格式是这样的:,格式:<因子名> : <value1>, <value2>, ...
1. 每一行是一个因子
2. 因子名称后是英文分号 “:”
3 .因素值之间是英文逗号 “,” 隔开每个值
然后在终端调用这个文件pict testpict.txt,如下图:
我们将每一行作为测试用例即可。
将生成结果保存到文件
pict 模板文件.ext > 目标文件.xtx / 目标文件.xls
这里的目标文件只能生成txt或者xls
通过“覆盖度”的角度来说,我们生成的测试用例肯定会有遗漏的场景。所以我们在实际工作中,在使用pict工具生成测试用例后,往往还需要根据我们的经验来补充测试用例。
例如:
是否需要增加因子取值的组合?
有哪些地方是容易出现问题的?是否还需要补充一些测试用例?
四、PICT的延伸使用
模型文件
PICT 模型文件格式如下:
# 因素及因素取值定义
parameter definitions
# 子模式,多因素组合覆盖
[sub-model definitions]
# 约束条件
[constraint definitions]
模型文件示例: pict-test.txt
# 各因素及其取值定义,格式:<ParamName> : <Value1>, <Value2>, <Value3>, ...
# 1. 每行都以因素名开头
# 2. 默认通过 “:” 分割开因素名和因素取值
# 4. 因素取值是一个数组,默认通过 “,” 隔开每个值
PLATFORM: x86, x64, arm
CPUS: 1, 2, 4
RAM: 1GB, 4GB, 64GB
HDD: SCSI, IDE
OS: Win7, Win8, Win10
Browser: Edge, Opera, Chrome, Firefox
APP: Word, Excel, Powerpoint, SQLServer
# 子模型定义,格式:{ <ParamName1>, <ParamName2>, <ParamName3>, ... } @ <Order>
# 1. 硬件因素 { PLATFORM, CPUS, RAM, HDD } 以 3-wise 进行组合
# 2. 软件因素 { OS, Browser } 以 2-wise 进行组合
# 3. 最后 {硬件因素组合,软件因数组合,App} 以 2-wise(默认,可通过 /o:N 设置) 进行组合
{ PLATFORM, CPUS, RAM, HDD } @ 3
{ OS, Browser } @ 2
# 约束条件定义
# IF Predicate THEN Predicate ELSE Predicate
# 支持的条件约束:=, <>, >, >=, <, <=, LIKE, IN
# IF 条件支持的逻辑运算符: NOT, AND, OR
IF [PLATFORM] = "x86" THEN [RAM] <> "64GB";
IF [PLATFORM] = "x64" THEN [CPUS] >= 2;
IF [APP] = "SQLServer" THEN [RAM] = "64GB" AND [CPUS] = 4;
生成用例
# 生成用例
$ pict pict-test.txt
PLATFORM CPUS RAM HDD OS Browser APP
arm 1 64GB IDE Win10 Chrome Excel
x64 4 1GB SCSI Win7 Firefox Excel
......
# 参数:/o:N
# 以 3-wise 来生成用例
$ pict pict-test.txt /o:3
# 参数:/r[:N]
# 指定随机种子,再不改变用例数量的情况下,不同的随机种子可以生产不同的因素组合
$ pict pict-test.txt /r:1
# 参数: /s
# 生成统计信息
$ pict pict-test.txt /s
Combinations: 512
Generated tests:300
Generation time:0:00:00