A/B test

作者: 微斯人_吾谁与归 | 来源:发表于2019-08-12 15:25 被阅读0次

拼多多(学霸批)

问题五:(考点:产品更新决策的数据支持)
某网站优化了商品详情页,现在新旧两个版本同时运行,新版页面覆盖了10%的用户,旧版覆盖90%的用户。现在需要了解,新版页面是否能够提高商品详情页到支付页的转化率,并决定是否要覆盖旧版,你能为决策提供哪些信息,需要收集哪些指标,给出统计方法及过程。

参考答案:

使用A/B测试模型,分析两个版本在一段时间期限内,详情页面到支付页面的转化率变化,并计算转化率变化后引起的的GMV变化。

可选择的决策:①确定发布新版本;②调整分流比例继续测试;③优化迭代方案重新开发。

要统计的指标:期限内新、旧版本商品详情页到支付页转化率 ,支付金额。

要衡量的指标:转化率变化 t 在是可接受的置信区间内是否显著,同时参考收益提升率。

指标计算方法:转化率=从某详情页到支付页用户数/浏览该商品详情页用户数(取日平均和标准差)

支付金额=从某详情页到支付页到支付成功路径用户的本次支付金额(取日平均)

用统计学模型:T检验模型:

多元线性回归中的 T 检验怎样理解?其 p 值为什么划定在 0.05?​www.zhihu.com

图标

采用决策①的情况:本次页面改进在显著性水平内,证明了‘转化率提升的假设’。并且收益提升率达到预期水平。

采用决策②的情况:本次页面改进在显著性水平内,无法证明‘转化率提升的假设’。分析原因可能是新版本样本空间不足。

采用决策③的情况:本次页面改进在显著性水平内,证明了‘转化率提升的假设’。但是收益提升率没有达到预期水平。

拼多多(提前批)

5.用户登录后下单量不理想,进行发券测试,满20-2,满30-3两种券,问你选择什么指标,如何测试
(1)不考虑券成本(2)考虑券成本

相关文章

  • github-notes

    A create repository named TEST B fork A’s TEST B clone B’...

  • js学习,局部域和全局域

    var a=b=123; 与 function test(){ var a =b= 123; } test() 有...

  • A/B test

    拼多多(学霸批) 问题五:(考点:产品更新决策的数据支持)某网站优化了商品详情页,现在新旧两个版本同时运行,新版页...

  • A/B test

    一、A/B 测试是什么? A/B 测试的本质是分离式组间试验,也叫对照试验。简单来说,A/B 测试在产品优化中的应...

  • A/B Test

    一、A/B Test是什么? A/B测试是一种帮助的网页优化实验方法。A/B测试的目的在于通过科学的实验设计和采集...

  • A/B test

    简单来说,A/B测试在产品优化中的应用方法是:在产品正式迭代发版之前,为同一个目标制定两个(或以上)方案,将用户流...

  • 无标题文章

    #test -a -b

  • A/B Test(一)

    AB测试介绍 什么是AB测试? A/B Test 是一个用于在线测试的常规方法,用于测试新产品或新功能。 如何操作...

  • 初探:A/B Test

    「A/B 测试」简单的说就是某个元素的两个(或多个)版本摆在面前,通过测试确定并应用更好的版本。因小巧有效低成本,...

  • 聊聊A/B test

    随着互联网的高速发展,每天都有成千上万新应用,新功能上线。对于拥有大流量的应用来说,一个微小的页面改版或者后台推荐...

网友评论

      本文标题:A/B test

      本文链接:https://www.haomeiwen.com/subject/izjujctx.html