正交法设计测试用例.ppt

正交实验法设计测试用例 张亶2020 3 1 一 正交表的由来 拉丁方名称的由来古希腊是一个多民族的国家 国王在检阅臣民时要求每个方队中每行有一个民族代表 每列也要有一个民族的代表 数学家在设计方阵时 以每一个拉丁字母表示一个民族 所以设计的方阵称为拉丁方 什么是n阶拉丁方 用n个不同的拉丁字母排成一个n阶方阵 n 26 如果每行的n个字母均不相同 每列的n个字母均不相同 则称这种方阵为n n拉丁方或n阶拉丁方 每个字母在任一行 任一列中只出现一次 什么是正交拉丁方 设有两个n阶的拉丁方 如果将它们叠合在一起 恰好出现n2个不同的有序数对 则称为这两个拉丁方为互相正交的拉丁方 简称正交拉丁方 如 3阶拉丁方用数字替代拉丁字母 二 正交实验法 正交试验设计 Orthogonalexperimentaldesign 是研究多因素多水平的一种设计方法它是根据正交性从全面试验中挑选出部分有代表性的点进行试验这些有代表性的点具备了 均匀分散 齐整可比 的特点正交试验设计是分式析因设计的主要方法 是一种高效率 快速 经济的实验设计方法 日本著名的统计学家田口玄一将正交试验选择的水平组合列成表格 称为正交表 例如作一个三因素三水平的实验 按全面实验要求 须进行33 27种组合的实验 且尚未考虑每一组合的重复数 若按L9 33 正交表按排实验 只需作9次按L18 37 正交表进行18次实验显然大大减少了工作量 因而正交实验设计在很多领域的研究中已经得到广泛应用 L9 33 示意图 利用因果图来设计测试用例时 作为输入条件的原因与输出结果之间的因果关系 有时很难从软件需求规格说明中得到 往往因果关系非常庞大 以至于据此因果图而得到的测试用例数目多的惊人 给软件测试带来沉重的负担 为了有效地 合理地减少测试的工时与费用 可利用正交实验设计方法进行测试用例的设计 正交实验设计方法 依据Galois理论 从大量的 实验 数据 测试例 中挑选适量的 有代表性的点 例 从而合理地安排实验 测试 的一种科学实验设计方法 类似的方法有 聚类分析方法 因子方法方法等 三 利用正交实验设计测试用例的步骤 提取功能说明 构造因子 状态表把影响实验指标的条件称为因子 而影响实验因子的条件叫因子的状态 利用正交实验设计方法来设计测试用例时 首先要根据被测试软件的规格说明书找出影响其功能实现的操作对象和外部因素 把他们当作因子 而把各个因子的取值当作状态 对软件需求规格说明中的功能要求进行划分 把整体的 概要性的功能要求进行层层分解与展开 分解成具体的有相对独立性的 基本的功能要求 这样就可以把被测试软件中所有的因子都确定下来 并为确定每个因子的权值提供参考的依据 确定因子与状态是设计测试用例的关键 因此要求尽可能全面的 正确的确定取值 以确保测试用例的设计作到完整与有效 2 加权筛选 生成因素分析表对因子与状态的选择可按其重要程度分别加权 可根据各个因子及状态的作用大小 出现频率的大小以及测试的需要 确定权值的大小 3 利用正交表构造测试数据集利用正交实验设计方法设计测试用例 比使用等价类划分 边界值分析 因果图等方法有以下优点 节省测试工作工时 可控制生成的测试用例数量 测试用例具有一定的覆盖率 在使用正交实验法时 要考虑到被测系统中要准备测试的功能点 而这些功能点就是要获取的因子或因素 但每个功能点要输入的数据按等价类划分有多个 也就是每个因素的输入条件 即状态或水平值 四 正交表的构成 行数 Runs 正交表中的行的个数 即试验的次数 也是我们通过正交实验法设计的测试用例的个数 因素数 Factors 正交表中列的个数 即我们要测试的功能点 水平数 Levels 任何单个因素能够取得的值的最大个数 正交表中的包含的值为从0到数 水平数 1 或从1到 水平数 即要测试功能点的输入条件 正交表的形式 L行数 水平数因素数 如 L8 27 五 正交表的正交性 整齐可比性在同一张正交表中 每个因素的每个水平出现的次数是完全相同的 由于在试验中每个因素的每个水平与其它因素的每个水平参与试验的机率是完全相同的 这就保证在各个水平中最大程度的排除了其它因素水平的干扰 因而 能最有效地进行比较和作出展望 容易找到好的试验条件 均衡分散性在同一张正交表中 任意两列 两个因素 的水平搭配 横向形成的数字对 是完全相同的 这样就保证了试验条件均衡地分散在因素水平的完全组合之中 因而具有很强的代表性 容易得到好的试验条件 查阅正交表 L9 34 计算理论 行数为mn型的正交表中试验次数 行数 每列水平数 1 1例 5个3水平因子及一个2水平因子 表示为35 21 试验次数 5 3 1 1 2 1 1 12 即L12 35 2 用正交表设计测试用例 一 步骤 1 有哪些因素 变量 2 每个因素有哪几个水平 变量的取值 3 选择一个合适的正交表 4 把变量的值映射到表中 5 把每一行的各因素水平的组合做为一个测试用例 6 加上你认为可疑且没有在表中出现的组合 二 如何选择正交表 考虑因素 变量 的个数考虑因素水平 变量的取值 的个数考虑正交表的行数取行数最少的一个 三 设计测试用例时的三种情况 1 因素数 变量 水平数 变量值 相符 2 因素数不相同 3 水平数不相同 例1 因素数与水平数刚好符合正交表 个人信息查询系统中的一个窗口要测试的控件有3个 也就是要考虑的因素有三个 姓名身份证号码手机号码每个因素里的状态有两个 填与不填 表中的因素数 3 表中至少有3个因素数的水平数 2行数取最少的一个 从正交表公式中开始查找 结果为 L4 23 测试用例如下 1 填写姓名 填写身份证号 填写手机号2 填写姓名 不填身份证号 不填手机号3 不填姓名 填写身份证号 不填手机号4 不填姓名 不填身份证号 填写手机号增补测试用例5 不填姓名 不填身份证号 不填手机号测试用例可以看出 如果按每个因素两个水平数来考虑的话 需要8个测试用例 而通过正交实验法进行的测试用例只有5个 大大减少了测试用例数 用最小的测试用例集合去获取最大的测试覆盖率 如果因素数不同的话 可以采用包含的方法 在正交表公式中找到包含该情况的公式 如果有N个符合条件的公式 那么选取行数最少的公式 水平数不相同 采用包含和组合的方法选取合适的正交表公式 例2 ppt打印的需求 假设功能描述如下 打印范围 全部 当前幻灯片 给定范围共三种情况打印内容 幻灯片 讲义 备注页 大纲视图共四种方式打印颜色 灰度 颜色 灰度 黑白共三种设置打印效果 幻灯片加框和幻灯片不加框两种方式 因素状态表 因素状态表 被测项目中一共有四个被测对象 每个被测对象的状态都不一样 选择正交表 1 表中的因素数 42 表中至少有4个因素的水平数 23 行数取最少的一个4 最后选中正交表公式 L16 45 第五列去掉没有意义 通过分析 由于四个因素里有三个的水平值小于3 所以从第13行到16行的测试用例可以忽略 测试用例1 测试用例2 3 测试用例3 例子3 这是 的混合水平的测试用例最少试验次数为7 查找正交表 没有合适的正交表可利用 需要构造正交表 将此两列横行水平数看成有序数对 1 1 1 2 2 1 2 2 再将每一种有序数对分别对应一个水平 在此 规定对应关系为 1 1 1 1 2 2 2 1 3 2 2 4 于是1 2两列就变成具有四水平的一列再将1 2这两列的交互作用列 第3列 从正交表中划去 这样就等于将第1 2 3这三列合并成新的一个四水平列 可以安排一个四水平因素 从而将改造成的正交表 测试用例1 入口1 签审方式1 路径1 提交方式1 测试用例2 入口1 签审方式2 路径2 提交方式2 测试用例3 入口2 签审方式1 路径1 提交方式2 测试用例4 入口2 签审方式2 路径2 提交方式1 测试用例5 入口3 签审方式1 路径2 提交方式1 测试用例6 入口3 签审方式2 路径1 提交方式2 测试用例7 入口1 签审方式1 路径1 提交方式1 测试用例8 入口4 签审方式2 路径1 提交方式1 根据系统现实情况和以往经验 再加上可疑的测试用例 谢谢