测试的有效性分析测试的有效性分析.pdfVIP

6 σ：是一种关注客户需求而非产品本身的质量管理理念。 是一种以数据为基础，追求几乎完美的质量管理方法。 必须结合本组织所提供的产品/服务的特点进行应用。 6个西格玛=3.4失误/百万机会―-意味着卓越的管理，强大的竞 争力和忠诚的客户 5个西格玛=230失误/百万机会－-优秀的管理、很强的竞争力和 比较忠诚的客户 4个西格玛=6,210失误/百万机会－-意味着较好的管理和运营能 力，满意的客户 3个西格玛=66,800失误/百万机会－-意味着平平常常的管理，缺 乏竞争力 2个西格玛=308,000失误/百万机会－-意味着企业资源每天都有 三分之一的浪费 1个西格玛=690,000失误/百万机会－-每天有三分之二的事情做 错的企业无法生存 由于任何检验、验证手段都不可能发现并排除所有缺陷，因此测试过程 的有效性达应用六西格玛的99.997%，那么测试过程就是可信的、有效 的。 如何提升测试过程的有效性 一种基于缺陷驱动的测试过程有效性的评价方法，该方法 通过统计系统上线后一定周期内(建议统计时间高于3个月， 小于12个月)客户反馈的系统缺陷数结合测试过程中发现 的缺陷数进行测试执行过程和测试用例设计过程的评价， 从而达到对测试过程有效性评 价的目的。 缺陷发现率(Defect Detetion Percentage ，缩 写DDP)，是衡量测试工作效率的成本的重 要指标之一。计算方法如下： DDP=bugstester/(bugstester+bugcustomer) *100% 六西格玛的质量评价 西格玛水平 百万次机会缺陷 6 3.4 5 233 4 6210 3 66807 2 308537 1 690000 严重程度1(致命的)：产品在正常运行环境下无法继续为用 户提供服务，并无其他工作方式满足同样功能，或者产品 失效后造成人身伤害或者危机人身安全。 严重程度2(严重的)：极大的影响产品提供给用户的服务， 或者严重影响系统要求或基本功能的使用。 严重程度3(一般的)：产品功能需要增强或者存在缺陷，但 是存在对应的补救方法解决。 严重程度4(轻微的)：细小的问题，不需要补救方法或者功 能增强，或者操作不方便，容易导致用户误操作。 测试执行过程缺陷遗漏率 不用缺陷严重程度，将其定义为不同的权重值分别为w1=5代 严重程 度1、w2=3代 严重程度2、w3=2代 严重程度3和w4=1代 严重程度 4 。按照缺陷严重程度计算出带有缺陷严重程度权重的缺陷基数 (Defect Base Numbers，缩写DBN)，定义如下： 其中wi为上述的各 个严重程度的权重，代 对应缺陷严重程度的缺陷数。 缺陷遗漏率 PLDP =DBNInTC(customer)/ DBN(tester) + DBNInTC(customer) *100% ，DBNInTCcostomer是客户方发现并反馈给技术支持人员 的错误并且该已被设计的测试用例覆盖的错误数计算出来 的缺陷基数 PLDP越小，测试过程中的测试执行过程有效 越高。 测试用例丢失率(Test-Case LosePercentage ，缩写TCLP)来评价测试用例的 优劣程度。 TestCasedesign是有客户方发现并反馈给技术支持人员的错 误并且被测试用例覆盖的测试用例数。 Testcasenodesing/(