AB测试是为Web或App界面或流程制作两个(A/B)或多个(A/B/n)版本,在同一时间维度,分别让组成成分相同(相似)的访客群组随机的访问这些版本,收集各群组的用户体验数据和业务数据,最后分析评估出最好版本全面采用。
《全程软件测试》️提到了高效AB测试的8条实用经验。
1. 效果惊人
希望选择后的版本能以微小的改动带来巨大的收益
2.耐心测试
大多数改动是不会有明显提高的,所以xuyq耐心地测试,即使结果是A和B没有什么差别。
3.Twyman法则
凡是看上去很出人意料的图表,通常都是因为数据统计错了。带着这种审慎的态度去评估AB测试的结果。
4.你与众不同
复制他人的经验往往得不到什么效果。找到差异化的点,将它们融入AB不同的版本,得到独特的新的客户体验。
5. 速度很关键
天下武功唯快不破。小步快走,关键要快。快速试错是一种积极的态度。
6. 关注产品质量
书中的例子我不太看得懂它和产品质量的关系。
7. 快速轻量的迭代
改动一点试一点,不要在一次AB测试中改动太多。这样会很难判断什么改动影响了用户的选择。
8. 用户基数是关键
用户群要足够大,采样的分析才有代表性。
网友评论