美文网首页
互联网产品的测试策略设计

互联网产品的测试策略设计

作者: 小敢敢不憨a | 来源:发表于2022-02-23 15:09 被阅读0次

第一,GUI 测试

互联网产品的上线周期,决定了 GUI 测试不可能大范围开展。

1、互联网产品的迭代周期,决定了留给开发 GUI 自动化测试用例的时间非常有限;

2、互联网产品客户端界面的频繁变化,决定了开展 GUI 自动化测试的效率会非常低,这也是最糟糕的。

因为敏捷模式下的快速反馈,在下一个迭代(sprint)可能就需要根据反馈来做修改和调整客户端界面,那么刚开发完,甚至是还没开发完的 GUI 自动化测试用例就要跟着一起修改。

这种频繁地修改,对开发 GUI 自动化测试是非常不利的。因为,刚开发完的自动化用例只跑了一次,甚至是一次还没来得及跑就需要更新了,导致 GUI 自动化测试还不如手工测试的效率高。

由此,互联网产品的 GUI 测试通常采用“手工为主,自动化为辅”的测试策略,手工测试往往利用探索性测试思想,针对新开发或者新修改的界面功能进行测试,而自动化测试的关注点主要放在相对稳定且核心业务的基本功能验证上。所以,GUI 的自动化测试往往只覆盖最核心且直接影响主营业务流程的 E2E 场景。

另外,从 GUI 测试用例的数量来看,传统软件的 GUI 测试属于重量级的,动不动就有上千个用例,因为传统软件的测试周期很长,测试用例可以轮流排队慢慢执行,时间长点也没关系。

而互联网产品要求 GUI 测试是轻量级的,你见过或者听过有哪个互联网产品设计了上千个 GUI 测试用例吗?互联网产品的上线周期,直接决定了不允许你去执行大量的用例。

第二,API 测试

你现在可能要问,既然互联网产品不适宜做重量级的 GUI 测试,那么怎样才能保证其质量呢?

其实,对于互联网产品来说,把测试重点放在 API 测试上,才是最明智的选择。为什么呢?我给你总结了以下五条原因。

1、API 测试用例的开发与调试效率比 GUI 测试要高得多,而且测试用例的代码实现比较规范,通常就是准备测试数据,发起 request,验证 response 这几个标准步骤。

2、API 测试用例的执行稳定性远远高于 GUI 测试。 GUI 测试执行的稳定性始终是难题,即使你采用了很多技术手段(这些具体的技术手段,我会在讲解 GUI 测试时再详细展开),它也无法做到 100% 的稳定。

而 API 测试天生就没有执行稳定性的问题,因为测试执行过程不依赖于任何界面上的操作,而是直接调用后端 API,且调用过程比较标准。

3、单个 API 测试用例的执行时间往往要比 GUI 测试短很多。当有大量 API 测试需要执行时,API 测试可以很方便地以并发的方式执行,所以可以在短时间内完成大批量 API 测试用例的执行。

4、现在很多互联网产品采用了微服务架构,而对微服务的测试,本质上就是对不同的 Web Service 的测试,也就是 API 测试。

在微服务架构下,客户端应用的实现都是基于对后端微服务的调用,如果做好了每个后端服务的测试,你就会对应用的整体质量有充分的信心。所以,互联网产品的 API 测试非常重要。

5、API 接口的改动一般比较少,即使有改动,绝大多数情况下也需要保证后向兼容性(Backward Compatibility)。所谓后向兼容性,最基本的要求就是保证原本的 API 调用方式维持不变。

显然,如果调用方式没有发生变化,那么原本的 API 测试用例也就不需要做大的改动,这样用例的可重用性就很高,进而可以保证较高的投入产出比(ROI)。

可见,互联网产品的这些特性决定了,API 测试可以实现良好的投入产出比,因此应该成为互联网产品的测试重点。这也就是为什么互联网产品的测试策略更像是个菱形结构的原因。

如图 2 所示就是这个菱形的测试策略,遵循“重量级 API 测试,轻量级 GUI 测试,轻量级单元测试”的原则。

图 2 互联网产品的菱形测试策略

第三,单元测试

了解了“重量级 API 测试”和“轻量级 GUI 测试”,接下来,我就跟你说说为什么是“轻量级单元测试”。

从理论上讲,无论是传统软件产品还是互联网产品,单元测试都是从源头保证软件质量的重要手段,因此都非常重要。但现实是,互联网产品真正能全面开展单元测试,并严格控制代码覆盖率的企业还是凤毛麟角。

但凡存在的都会有其合理性,我认为最主要的原因还是在于互联网产品的“快”,快速实现功能,快速寻求用户反馈,快速试错,快速迭代更新。

在这样的模式下,互联网产品追求的是最快速的功能实现并上线,基本不会给你时间去做全面的单元测试。即使给你预留了单元测试的时间,频繁的迭代也会让单元测试处于不断重写的状态。因此,单元测试原本的价值,很难在实际操作层面得到体现。

那么,互联网产品真的可以不用做单元测试么?答案是否定的,只不是这里的单元测试策略要采用“分而治之”的思想。

互联网产品通常会分为应用层和后端服务,后端服务又可以进一步细分为应用服务和基础服务。

后端基础服务和一些公共应用服务相对稳定,而且对于系统全局来说是“牵一发而动全身”,所以后端服务很有必要开展全面的单元测试;而对于变动非常频繁的客户端应用和非公用的后端应用服务,一般很少会去做单元测试。

另外,对于一些核心算法和关键应用,比如银行网关接口,第三方支付集成接口等,也要做比较全面的单元测试。

总结来讲,互联网产品的全面单元测试只会应用在那些相对稳定和最核心的模块和服务上,而应用层或者上层业务服务很少会大规模开展单元测试。

总结

传统软件通常采用金字塔模型的测试策略,而现今的互联网产品往往采用菱形模型。菱形模型有以下四个关键点:

(1)以中间层的 API 测试为重点做全面的测试。

(2)轻量级的 GUI 测试,只覆盖最核心直接影响主营业务流程的 E2E 场景。

(3)最上层的 GUI 测试通常利用探索式测试思维,以人工测试的方式发现尽可能多的潜在问题。

(4)单元测试采用“分而治之”的思想,只对那些相对稳定并且核心的服务和模块开展全面的单元测试,而应用层或者上层业务只会做少量的单元测试。

相关文章

  • 互联网产品的测试策略设计

    第一,GUI测试 互联网产品的上线周期,决定了GUI测试不可能大范围开展。 1、互联网产品的迭代周期,决定了留给开...

  • 互联网产品的测试策略应该如何设计?

    文章内容来源于《软件测试52讲》 先思考一下互联网产品的测试策略和传统软件产品的测试策略到底有哪些不同? 答:研发...

  • 从假设检验到A/B测试

    1. 前言 A/B测试常用于算法优化(推荐,广告,搜索等),运营策略选择,UI设计等,是互联网产品迭代中最常用的评...

  • 【产品】20分钟课程学习(133-136课)

    学习互联网产品设计流程:确定需求-定义产品-交互设计-UI设计-产品开发-产品测试-上线 学习需求分析的方案:为什...

  • 1. 什么是产品经理

    什么是互联网产品经理 负责产品的规划与设计 研究竞争对手,确定产品策略及长期规划 产品设计,优化需求文档产出 通过...

  • 互联网产品测试策略

    以下内容摘自【茹炳晟-软件测试52讲】 以中间层的API测试为重点做全面的测试。 轻量级的GUI测试,只覆盖最核心...

  • 测试分析和执行

    二、测试分析和测试架构上 1、制定阶段性测试策略 2、落实测试设计策略,保证测试设计的质量 三、在测试执行上 制定...

  • 从0到1的产品经验

    互联网产品从0到1,由这几个流程组成:用户需求及产品目标、产品需求文档及原型设计、界面设计、产品研发、产品测试、产...

  • 2018-07-20 Test Plan 测试计划

    测试规划管理 设计测试策略设计测试主题设计测试用例创建需求覆盖定义测试步骤自动化测试分析测试计划

  • L2-12开展通用产品风险评估

    测试策略描述了组织的通用测试方法,通常作为项目测试活动的起点。典型的测试策略包括通用产品风险(影响产品质量的风险,...

网友评论

      本文标题:互联网产品的测试策略设计

      本文链接:https://www.haomeiwen.com/subject/lnbmoltx.html