标签质量评估体系
一般来说,标签被正式应用到业务之前,需要先通过一套完整的评估体系进行评估,评估后一旦发现标签质量过差,则不允许上线。只有待其达到基本质量要求后才允许上线,并开放给业务使用。因为质量过差的标签不仅对业务没有价值,还容易让用户对标签画像系统失去信任。
因此,需要对标签的质量进行科学、完整的评估。只有这样,我们才能有效控制标签质量,并指导标签管理者、开发者不断地提升标签质量。
那什么是标签质量评估体系呢?标签质量评估体系主要分为算法指标、业务指标、数据回流这三大部分。
算法指标:指在生产标签过程中需要完成的评估指标,包括标签的精准性、标签的覆盖量、标签各取值的占比、标签本身的稳定性等指标。
业务指标:主要由业务来定义,同一个标签应用在不同业务上产生的影响和作用可能有所区别,这就需要我们从业务价值和业务影响力两方面来考虑。
数据回流:指的是回流标签使用后的用户反馈,主要用于优化标签。
评估标签质量时,我们首先需要重点考虑算法指标,算法指标没问题后才可以上线,并开放给业务使用;
其次考虑业务指标,因为业务指标是后验,也就是说如果我们想知道一个标签的业务质量情况,必须通过投放测试才行;
最终业务使用标签后的数据会进行回流,用来监控标签应用在业务场景的价值,以便得出一个比较公允的衡量,而这个衡量,对后面标签的优化方向具有很强的指导意义。
网友评论