A/B效果评估是实验者在实验后,依据评估报告进行决策的重要依据。 因此,我们在实验后的效果评估环节,效果评估要达成三个目标即权威、灵活性和方便。
不管是实验前的AA分组,还是实验后的效果评估,我们要解决的一个核心问题就是如何灵活地“取数”,为我们的AA分组和AB效果分析提供一个灵活稳定的取数服务。因此,我们整个架构的核心就是构建稳定、灵活的取数服务,具体架构如下图所示。离线建模和指标模型管理完成数据和元数据建设,建立权威完备的指标体系;中间的取数服务作为上层各应用服务和指标体系的“桥梁”,为上层各应用服务提供其所依赖的指标。


网友评论