1 成对测试简介
成对测试(Pairwise Testing)又称结对测试、两两测试,是一种正交分析的测试技术。成对组合覆盖这一概念是Mandl于1985年在测试Aad编译程序时提出来的。是当不可能遍历产品所有功能点时用到的一种测试手段,即如果用尽可能少的工作发现最多的缺陷(测试投入产出性价比)。
经验证,Cohen等人应用成对组合覆盖测试技术对Unix中的“Sort”命令进行了测试。测试结果表明覆盖率高达90%以上,可见成对成对测试是一种非常有效的测试用例设计方法。
成对组合覆盖要求任意两个因素(输入条件)的所有水平组合至少要被覆盖1次。实现成对组合覆盖的算法工具有很多,其中微软的PICT就是其中一个。
2 PICT使用
PICT全称Pairwise Independent Combinatorial Testing tool,是微软的一款成对组合的命令行生成工具,生成pairwise testing所需的测试用例,并且可以将结果导出到excel。
2.1 安装
常用的Pairwise工具集:http://www.pairwise.org/tools.asp 处下载PICT工具。下载后默认安装,也可安装在: D:\Program Files (x86)\PICT,可以目录下看到有两个文件‘pict.exe’、‘PICTHelp.htm’。
2.2 使用
1.在PICT的目录下,新建一个test.txt文件,输入与测试用例相关的所有参数,如下图1所示:
图1 test.txt参数内容
test.txt参数内容,如下代码,这里要注意,标点符号要使用英文:
账户名:空,不存在,超长,超短,正常
密码:空,超长,超短,不匹配,正常
验证码:空,超长,超短,不匹配,正常
按钮:确定,取消
2.运行-cmd进入命令提示符,输入命令:
D:
cd D:\Program Files (x86)\PICT
pict test.txt
图2 输出结果
3.可以通过命令pict test.txt >test.xls命令,将结果输出到test.xls的excel表格当中(提示格式问题时点击确定即可,不能导出到excel中,安装WPS时导出也会有问题)
说明:
在该案例中,最终共生成了27个组合。若是靠人来设计组合用例,需要分析5*5*5*2 种组合,可以看到组合情况是多么复杂。这个工具可以大大节省我们在遇到复杂组合条件时的处理难度。