美文网首页TMMi组织测试改进专栏
L2-13定义实用的测试性能指标

L2-13定义实用的测试性能指标

作者: 郑文强_c48f | 来源:发表于2019-08-07 08:10 被阅读0次

建立和部署一套面向测试目标的测试过程性能指标,以测量测试过程的质量,同时也包括了测试性能指标相关的数据收集、存储和分析的规程。也就是说定义测试过程性能指标,必定与度量相关。这里简单讲解与度量相关的一些内容。关于度量的详细信息,将会在TMMi 4级(测量级)展开。本文主要包括:

1、度量的定义

2、度量过程模型

3、测试度量指标

4、GQM的应用

一、度量的定义

关于度量的定义,大家经常会发现与之对应的几个英文单词“metric”、“measure”和“measurement”。不管是在ISO/IEC15939-2007,还是在ISO 9126标准中,它们的定义都是所有不同。在本文中,结合了标准中的一些定义,以及我自己的一些理解,分别使用“metric”和“measurement”两个词语代表“度量”和“测度”的含义,从测试的角度分别将其意思理解为:

1)度量Metric:是对被测对象属性的量化表示,即关注在量化结果;

2)测度Measurement:是对被测对象属性的量化过程,即关注在量化的过程;

在测试实践中,测试人员应该将重点转移到这些术语背后对应的内容和活动上,理解其后面的东西,术语本身就可以自然得到澄清。关于度量相关的其他一些概念,可以参考标准ISO 15939-2007度量信息模型,其结构框架如下所示:

二、度量过程模型

关于度量的过程描述,也来自标准ISO 15939-2007,其将度量过程分为4个主要的阶段,分别是:建立和维护度量承诺、制订度量计划、实施度量和评估度量。从测试的角度,测试度量可以作为一个工具融合在整个测试过程中,测试度量的需求、度量计划中需要的信息等都来自测试过程。测试过程中不断积累的经验库有利于测试度量的计划和实施,而测试度量活动的评估结果可以对经验库不断进行更新。

三、测试度量指标

测试度量的获取,不仅有助于测试计划的制订(例如:估算和预测),也有助于测试过程监控和过程改进。测试度量指标有很多,来自不同的模型或标准,例如:CMMI(能力成熟度模型集成)和PSM(使用软件和系统度量)都提供了很多的分类和具体指标。

但是,在开展度量时,经常会采用自下而上的构建过程,即测试过程中会收集各种数据形成度量,例如:缺陷密度、测试用例执行率、测试覆盖率等。在思考和选择测试度量时,你会发现这些指标往往杂乱无章,甚至有些基本都是不需要的。选择测试度量的问题,往往不是度量指标不够,而是太多。

四、GQM的应用

选择度量更好的一种的方式是自上而下的形式展开,必须以度量目标和模型为基础,这就是GQM(目标、问题和度量模型)的由来。其过程由4个阶段组成:计划阶段、定义阶段、收集数据阶段和解释阶段。其核心的活动包括:

1)制订一系列目标Goal;

2)设定一些描述目标的问题Question;

3)定义需要回答这些问题的度量标准Metric;

4)开发收据收集和分析的机制;

5)收集、确认和分析数据,并采取合适的行动;

6)评估度量数据是否与目标一致,并为其后的改进提供建议;

7)为利益干系人提供反馈信息;

GQM的模型的核心在于目标驱动,起源于度量目标,将其目标分解成多个相关的问题,然后每个问题和一系列的度量指标相对应。同样的度量指标可能在回答多个问题时用到。其结构图如下所示:

因此,在定义测试性能指标时,建议以GQM模型为基础,自上而下的方式定义和选择度量指标。同时可以参考CMMI和PSM中已经提供的度量类型和指标,目的是为了更好的评估测试过程的效率和有效性、被测对象的质量、评估测试充分性和测试进度、监控测试过程等。

相关文章

  • L2-13定义实用的测试性能指标

    建立和部署一套面向测试目标的测试过程性能指标,以测量测试过程的质量,同时也包括了测试性能指标相关的数据收集、存储和...

  • 性能测试的分类

    1、狭义性能测试 根据性能指标给出结果的测试。(模拟生产环境) 2、基准测试 给出性能指标。(性能指标未知) 3、...

  • 数据库基准测试工具-sysbench

    基准测试 定义 数据库的基准测试是对数据库的性能指标进行定量的、可复现的、可对比的测试。 基准测试与压力测试 基准...

  • [JPT_03]性能测试-测试模型构建 & 用例设计

    目录结构 一、测试模型构建 从上一篇 [JPT_02]性能测试-性能指标的分析 & 定义 确定了性能测试的需求及对...

  • 性能测试(2) - 定义性能测试的指标

    做性能测试前,除了需要了解性能测试的需求,我们还要定义清楚性能测试的指标。 我们所关注的性能指标 响应时间:比较熟...

  • 负载测试,并发测试,压力测试区别

    负载测试 1、定义:负载测试是通过逐步增加系统负载,测试系统性能的变化,并最终确定在满足性能指标的情况下,系统所能...

  • 2.压测过程

    1.区分定义 性能测试:通过自动化的测试工具模拟多种正常、峰值以及异常负载条件来对系统的各项性能指标进行测试 负载...

  • 应用系统性能测试概述

    定义 指通过自动化的测试工具模拟多种正常、峰值以及异常负载条件来对系统的各项性能指标进行测试 方法 基准测试:是一...

  • 前后端性能指标

    [TOC] 前后端性能指标 性能测试的定义和分类 定义: 观察系统在一个给定的环境和场景中的性能表现是否与预期目标...

  • 性能测试

    性能测试基础定义:基于协议模拟用户发出请求(业务的模拟),对服务器形成一定的负载,来测试服务器的性能指标是否满足要...

网友评论

    本文标题:L2-13定义实用的测试性能指标

    本文链接:https://www.haomeiwen.com/subject/swdndctx.html