2010年软考软件评测师测试工作管理与规范(4)

 概念：测试的主要评测方法

　　简介

　　测试的主要评测方法包括覆盖和质量。

　　测试覆盖是对测试完全程度的评测，它建立在测试覆盖基础上，测试覆盖是由测试需求和测试用例的覆盖或已执行代码的覆盖表示的。

　　质量是对测试对象(系统或测试的应用程序)的可靠性、稳定性以及性能的评测。质量建立在对测试结果的评估和对测试过程中确定的变更请求(缺陷)的分析的基础上。

　　覆盖评测

　　覆盖指标提供了"测试的完全程度如何?"这一问题的答案。最常用的覆盖评测是基于需求的测试覆盖和基于代码的测试覆盖。简而言之，测试覆盖是就需求(基于需求的)或代码的设计/实施标准(基于代码的)而言的完全程度的任意评测，如用例的核实(基于需求的)或所有代码行的执行(基于代码的)。

　　系统的测试活动建立在至少一个测试覆盖策略基础上。覆盖策略陈述测试的一般目的，指导测试用例的设计。覆盖策略的陈述可以简单到只说明核实所有性能。

　　如果需求已经完全分类，则基于需求的覆盖策略可能足以生成测试完全程度的可计量评测。例如，如果已经确定了所有性能测试需求，则可以引用测试结果来得到评测，如已经核实了 75% 的性能测试需求。

　　如果应用基于代码的覆盖，则测试策略是根据测试已经执行的源代码的多少来表示的。这种测试覆盖策略类型对于安全至上的系统来说非常重要。

　　两种评测都可以手工得到(公式如下所示)或通过测试自动化工具计算得到。

　　基于需求的测试覆盖

　　基于需求的测试覆盖在测试生命周期中要评测多次，并在测试生命周期的里程碑处提供测试覆盖的标识(如已计划的、已实施的、已执行的和成功的测试覆盖)。

　　测试覆盖通过以下公式计算：

　　测试覆盖 = T(p,i,x,s) / RfT

　　其中：

　　T 是用测试过程或测试用例表示的测试 (Test) 数(已计划的、已实施的或成功的)。

　　RfT 是测试需求 (Requirement for Test) 的总数。

　　在制定测试计划活动中，将计算测试覆盖以决定已计划的测试覆盖，其计算方法如下：

　　测试覆盖(已计划的) = Tp / RfT

　　其中：

　　Tp 是用测试过程或测试用例表示的已计划测试 (Test) 数。

　　RfT 是测试需求 (Requirement for Test) 的总数。

　　在实施测试活动中，由于测试过程正在实施中(按照测试脚本)，在计算测试覆盖时使用以下公式：

　　测试覆盖(已执行的) = Ti / RfT

　　其中：

　　Tx 是用测试过程或测试用例表示的已执行的测试 (Test) 数。

　　RfT 是测试需求 (Requirement for Test) 的总数。

　　在执行测试活动中，使用两个测试覆盖评测，一个确定通过执行测试获得的测试覆盖，另一个确定成功的测试覆盖(即执行时未出现失败的测试，如没有出现缺陷或意外结果的测试)。

　　这些覆盖评测通过以下公式计算：

　　测试覆盖(已执行的) = Tx / RfT

　　其中：

　　Tx 是用测试过程或测试用例表示的已执行的测试 (Test) 数。

　　RfT 是测试需求 (Requirement for Test) 的总数。

　　成功的测试覆盖(已执行的) = Ts / RfT

　　其中：

　　Ts 是用完全成功、没有缺陷的测试过程或测试用例表示的已执行测试 (Test) 数。

　　RfT 是测试需求 (Requirement for Test) 的总数。

　　如将以上比率转换为百分数，则以下基于需求的测试覆盖的陈述成立：

　　x% 的测试用例(上述公式中的 T(p,i,x,s))已经覆盖，成功率为 y%

　　这一关于测试覆盖的陈述是有意义的，可以将其与已定义的成功标准进行对比。如果不符合该标准，则此陈述将成为预测剩余测试工作量的基础。