3.验收标准-51Testing软件测试网.docVIP

客户端软件验收测试标准 版本号： 修改日期： 版本修改记录 版本 作者 评审 变更描述 日期 0.1 0.2 0.3 目 录 1. 前言 4 1.1. 文档范围 4 1.2. 目标 4 2. 验收测试介入标准 4 3. 验收标准 4 3.1. 缺陷严重级别定义 4 3.2. 各缺陷级别的现象举例 5 3.3. 验收通过标准 6 4. 验收测试内容 6 5. 附件 6 5.1. 缺陷分析报告模版 6 5.2. 测试用例模版 7 前言 文档范围 本文档定义了软件的验收测试标准。包括验收测试需要的交付件、缺陷级别定义、验收通过标准和验收测试内容等。 目标 为软件验收测试提供指导。验收测试结果只对PM判断是否上线起参考作用，不对最终的软件质量进行跟踪负责。 验收测试介入标准 乙方应在双方约定时间内提供以下交付件，供做软件验收测试和评估。无法提供以下材料，不进入验收测试。 其他说明：被退回次数超过3次（含）将不再接收验收测试。 表1 交付件说明 序号 项目名称 递交日期 备注 系统设计文档 已提交 （2009.11） 评审修改完成的系统设计文档 测试用例集 2009.12.25 软件测试用例、测试用例执行记录。 用例 缺陷列表 2009.12.25 验收测试前的缺陷分析报告 BUG列表（含遗留bug）。 测试报告 2009.12.25 验收测试版本的软件测试报告 参考附件模板《测试报告模板》 软件 2009.12.25 服务器端软件以及客户端软件 （除种植系统） 客户端开发提供realease note 2009.12.25 说明本次测试版本号（更新功能、bug列表） 验收标准 验收退回标准 退回情况分为两种： 第一种，测试根据乙方提供测试用例，挑选主流程业务的测试用例，建立“预测试用例集”（类似于冒烟测试用例集，一个系统基本取两到三个用例），预测试用例集中有一条用例执行不通过，本次提交测试退回。 第二种：不达到验收测试标准（参见3.2章），验收测试不通过，给予退回。 下次提交测试时间：退回之日（不含退回日）起五个工作日后提交新的验收版本。 验收通过标准 测试按 乙方提供的测试用例集和自由测试方式进行验收测试，测试覆盖率达到70%以上，要求验收测试发现的缺陷数量不大于表4的数据。缺陷来源不局限于用例集。 表4 验收通过标准 阶段 Blocker Major Normal 验收测试 0 5 20 如果验收测试结果不符合表4要求，测试给予本次验收测试的结果为Fail。 缺陷严重级别定义 缺陷严重级别分为3级，各个级别定义如表2。 表 2 缺陷严重级别描述 级别 名称 详细描述 Blocker 致命缺陷 程序无法运行的错误 测试无法执行的错误 Major 严重缺陷 链接错误 前后模块不一致 需求问题 实现与需求不符 出现调试代码 功能性错误 程序性能低下 程序引起的安全问题 Normal 一般缺陷 页面格式错误 文案错误 图片错误 兼容性错误 校检错误 关联性错误 配置问题 功能易用程度低 合理建议 遗留问题 暂时无法实现技术问题 各缺陷级别的现象举例 为了更合理的定义缺陷级别，表3列举各级别的现象描述。表3中罗列的缺陷描述不能表达所有的缺陷现象，因此仅作为参考，如果有表3之外的缺陷现象发生，按照表2定义的级别描述来确定其严重级别。 表3 各缺陷级别的现象举例 级别 常见缺陷现象 Blocker 灾难性的缺陷，会对系统造成致命影响，例如系统崩溃、应用程序死掉、应用程序异常退出、通讯意外中断或系统进入死循环、死机、黑屏、数据丢失、用户无法登录等情况。如果此级别的问题存在，用户是绝对不能接受的。 基本功能无法实现或遗漏，如某一应用程序启动不了或关键功能无法运行，关键数据错失较多。 性能问题，如操作实时失败、数据库读写效率低 无法正常安装。 升级脚本错误，使升级失败。 内存使用错误，如内存泄漏、内存溢出、数组越界等。 进程资源不能释放。 正常情况下基本功能无法工作，例如不能登录、不能有哪些信誉好的足球投注网站商品、商品不能交易等 对现有应用系统造成恶略影响 Major 基本功能存在部分问题或次要功能无法实现或遗漏。 程序抛出异常信息没有处理，如空指针、通讯异常等。 安装后文件不全、文件错误造成基本功能无法实现 前后台版本不兼容。 客户端功能实现与需求不符 测试中发现死机、重启、黑屏等，但概率较低 主要界面显示有明显的错误 Normal 对系统造成重要影响，存在的缺