软件测试完成标准.doc

软 件 测 试 完 成 标 准 目 录 1 简介 3 1 1 目 的 3 1 2 范围 3 1 3 文档结构 3 1 4 词汇表 3 2 软件测试完成标准 3 2 1 软件测试暂停 完成标准 3 2 2 单元测试停止标准 4 2 3 集成测试停止标准 4 2 4 确认测试停止标准 4 2 5 系统测试停止标准 4 2 6 安装测试停止标准 4 2 8 验收测试停止标准 5 2 9 缺陷修复率标准 5 2 10 覆盖率标准 5 2 11 缺陷等级分类 5 1 简介 1 1 目的 本文档的目的是为软件单元测试 集成测试 确认测试 系统测试 安装测试 验收测试 提供停止标准 1 2 范围 本文档适用于虹信软件股份有限公司所有项目及产品的测试活动 1 3 文档结构 第一部分 简介 介绍软件停止标准的目的 本标准的适用范围 以及在本文档中使用的词汇的解释 第二部分 描述软件单元测试 集成测试 确认测试 系统测试 安装测试 验收测试停止标准 第三部分 列出本标准使用的参考文献 第四部分 附录 1 4 词汇表 缺陷 Defect 缺陷是对软件产品预期属性的偏离现象 覆盖率 Coverage rate 语句覆盖率 测试用例执行覆盖率 测试需求覆盖率等的总称 2 软件测试完成标准 2 1 软件测试暂停 完成标准 1 软件系统在进行单元 集成 确认 系统 安装 验收测试时 发现紧急错误 大于等于严重级别错误暂停测试返回开发 2 软件系统经过单元 集成 确认 系统 安装 验收测试 分别达到单元 集 成 确认 系统 安装 验收测试停止标准 3 软件系统通过验收测试 并已得出验收测试结论 4 软件项目需暂停以进行调整时 测试应随之暂停 并备份暂停点数据 5 软件项目在其开发生命周期内出现重大估算 进度偏差 需暂停或终止时 测 试应随之暂停或终止 并备份暂停或终止点数据 2 2 单元测试完成标准 1 按照单元测试计划完成了所有规定单元的测试 2 达到了测试计划中关于单元测试所规定的覆盖率的要求 3 软件单元功能与设计一致 4 在单元测试中发现的错误已经得到修改 各级缺陷修复率达到标准 2 3 集成测试完成标准 1 按照集成构件计划及增量集成策略完成了整个系统的集成测试 2 达到了测试计划中关于集成测试所规定的覆盖率的要求 3 被测试的集成工作版本每千行代码必须发现至少 2 个错误 不含优化级别错误 4 集成工作版本满足设计定义的各项功能 性能要求 5 在集成测试中发现的错误已经得到修改 各级缺陷修复率达到标准 2 4 功能测试完成标准 1 功能测试用例设计已经通过评审 2 按照功能测试计划完成了功能测试 3 达到了功能测试计划中关于功能测试所规定的覆盖率的要求 4 系统达到详细设计定义的各项功能 性能 5 在系统测试中发现的错误已经得到修改 各级缺陷修复率达到标准 2 5 系统测试完成标准 1 系统测试用例设计已经通过评审 2 按照系统测试计划完成了系统测试 3 达到了测试计划中关于系统测试所规定的覆盖率的要求 4 被测试的系统每千行代码必须发现至少 1 个错误 不含五级错误 5 系统满足需求规格说明书的要求 6 在系统测试中发现的错误已经得到修改 各级缺陷修复率达到标准 2 6 安装测试完成标准 1 安装退出之后 确认应用程序可以正确启动 运行 2 在安装之前请备份你的注册表 安装之后 察看注册表中是否有多余的垃圾 信息 3 如果系统提供自动卸载工具 那么卸载之后需检验系统是否把所有的文件全 部删除 注册表中有关的注册信息是否也被删除 4 安装完成之后 可以在简单地使用之后再执行卸载操作 有的系统在使用之 后会发生变化 变得不可卸载 5 对于客户服务器模式的应用系统 可以先安装客户端 然后安装服务器端 测试是否会出现问题 6 考察安装该系统是否对其他的应用程序造成影响 特别是 Windows 操作系统 经常会出现此类的问题 7 在安装测试中发现的错误已经得到修改 各级缺陷修复率达到标准 2 8 验收测试完成标准 1 软件需求分析说明书中定义的所有功能已全部实现 性能指标全部达到要求 2 在验收测试中发现的错误已经得到修改 各级缺陷修复率达到标准 3 所有测试项没有残余紧急 严重级别错误 4 需求分析文档 设计文档和编码实现一致 5 验收测试工件齐全 测试计划 测试用例 测试日志 测试通知单 测试分析 报告 待验收的软件安装程序 注 验收测试原本要求无任何级别错误遗留 但如果时间紧迫 则可以紧急 严重级别错 误全部修复 普通级别错误修复率达 60 以上 2 9 缺陷修复率标准 1 紧急 严重级别错误修复率应达到 100 2 普通级别错误修复率应达到 95 以上 3 优化级别错误修复率应达到 60 以上 注 项目紧急时 普通级别错误修复率达 60 以上 优化级别错误修复率达 20 即可 2 10 覆盖率标准 1 测试用例执行覆盖率应达到 100 功能测试用例均以执行 2 测试需求执行覆盖率应达到 100 业务测试用例均以执行 2 11 缺陷等级分类 紧急 不能完全满足系统要求 基本功能未完全实现 系统崩溃或挂起等导致系统不 能继续运行 包括以下各种错误 1 由于程序所引起的死机 非法退出 2 死循环 3 数据库发生死锁 4 因错误操作导致的程序中断 5 功能错误 6 与数据库连接错误 7 数据通讯错误 严重 严重地影响系统要求或基本功能的实现 且没有更正办法 重新安或重新启动 该软件不属于更正办法 使系统不稳定 或破坏数据 或产生错误结果 或部 分功能无法执行 而且是常规操作中经常发生或非常规操作中不可避免的主要 问题 包括以下各种错误 1 程序接口错误 2 因错误操作迫使程序中断 3 系统可被执行 但操作功能无法执行 含指令 4 单项操作功能可被执行 但在此功能中某些小功能 含指令参数的使用 无 法 被执行 对系统非致命的 5 在小功能项的某些项目 选项 使用无效 对系统非致命的 6 业务流程不正确 7 功能实现不完整 如删除时没有考虑数据关联 8 功能的实现不正确 如在系统实现的界面上 一些可接受输入的控件点击后 无作用 对数据库的操作不能正确实现 9 报表格式以及打印内容错误 行列不完整 数据显示不在所对应的行列等导 致数据显示结果不正确的错误 普通 严重地影响系统要求或基本功能的实现 但存在合理的更正办法 重新安装或 重新启动该软件不属于更正办法 系统性能或响应时间变慢 产生错误的中间 结果但不影响最终结果等影响有限的问题 包括以下各种错误 1 操作界面错误 包括数据窗口内列名定义 含义是否一致 2 打印内容 格式错误 只影响报表的格式或外观 不影响数据显示结果的错 误 3 简单的输入限制未放在前台进行控制 4 删除操作未给出提示 5 已被捕捉的系统崩溃 不影响继续操作 6 虽然正确性不受影响 但系统性能和响应时间受到影响 7 不能定位焦点或定位有误 影响功能实现 8 显示不正确但输出正确 9 增删改功能 在本界面不能实现 但在另一界面可以补充实现 优化 使操作者不方便或遇到麻烦 但它不影响执行工作功能或重要功能 界面拼写 错误或用户使用不方便等小问题或需要完善的问题 包括以下各种错误 1 界面不规范 2 辅助说明描述不清楚 3 输入输出不规范 4 长时间操作未给用户提示 5 提示窗口文字未采用行业术语 6 可输入区域和只读区域没有明显的区分标志 7 必填项与非必填项应加以区别 8 滚动条无效 9 键盘支持不好 如在可输入多行的字段中 不支持回车换行 或对相同字段 在不同界面支持不同的快捷方式 10 界面不能及时刷新 影响功能实现 11 光标跳转设置不好 鼠标 光标 定位错误 12 一些建议性问题