美文网首页
【评估指标】广告/推荐评估指标 NDCG

【评估指标】广告/推荐评估指标 NDCG

作者: 7ccc099f4608 | 来源:发表于2020-11-25 22:09 被阅读0次

参考:https://en.wikipedia.org/wiki/Discounted_cumulative_gain

定义

NDCG:Normalized Discounted Cumulative Gain,归一化 (的)折损 累计 增益
感觉翻译为归一化的加权累计增益更好理解,只不过权重是衰减的。

指标演化

CG

累计增益:不考虑顺序/相对位置,只对增益做累加
CG = \sum_{i=1}^{k} {gain}

DCG

折损累计增益:考虑顺序/相对位置,对增益做加权。增益越大、排在越前面的,DCG越大。但是两个不同的DCG不具有可比性(DCG大,不一定是真的好,可能只是CG大,加权后还是大)。
DCG = \sum_{i=1}^{k} {\frac{gain}{log_{2}{(i+1)}}}
权重:
\frac{1}{log_{2}{(i+1)}}

NDCG

归一化 (的)折损 累计 增益:对DCG做归一化,使得指标具有可比性。
归一化的方式是引入IDCG (Ideal Discounted Cumulative Gain),理想情况下的折损累计增益。即,认为最完美的排序方式是,增益大的排在前面,此时的DCG是最大的,也就是IDCG。

NDCG = \frac{DCG} {IDCG}

计算

DCG

排序(i) 增益(gain) CG \frac{1}{log_{2}{(i+1)}} DCG = \frac{\\gain}{log_{2}{(i+1)}}
1 3 3 1 3
2 2 5 1.585 1.262
3 3 8 2 1.5
4 0 8 2.322 0
5 1 9 2.585 0.387
6 2 11 2.807 0.712

DCG = \sum_{i=1}^{k} {\frac{gain}{log_{2}{(i+1)}}}=3+1.62+...+0.712=6.861

IDCG

增益(按照增益排序后) \frac{1}{log_{2}{(i+1)}} \frac{\\gain}{log_{2}{(i+1)}}
3 1 3
3 1.585 1.892744479
2 2 1
2 2.322 0.861326443
1 2.585 0.386847195
0 2.807 0

IDCG = \sum_{i=1}^{k} {\frac{gain}{log_{2} {(i+1)}}}=3+1.892+...+0=7.141

NDCG

NDCG = {\frac{DCG}{IDCG} }=0.961

DCG 和IDCG增益(gain)保持一致,只是折损(排序)不一致。

相关文章

  • 【评估指标】广告/推荐评估指标 NDCG

    参考:https://en.wikipedia.org/wiki/Discounted_cumulative_ga...

  • 评估指标:HR 和 NDCG

    1、评估方法 HR(命中率)和 NDCG(归一化折损累计增益),HR直观地衡量测试项目是否存在于前10名列表中,而...

  • 《绩效管理》--绩效指标与标准

    1、什么是绩效评估指标?绩效评估指标有哪些分类? 评估指标指的是评估因子或评估项目。 根据评估内容分:1)工作业绩...

  • FM算法模型评估

    目录一、FM算法简介二、评估方法三、参数指标分析1.误差分析2.ndcg指标分析3.查准率分析4.查全率分析四、分...

  • 评估指标

    机器学习或者是日常生活中,遇见的往往是二分类问题比较多,二分类模型的模型评价准则很多,Auc_score,F1_s...

  • 评估指标

    ==用于衡量模型的最终效果== 一、背景 在学习tensorflow的初级阶段,会常常搞不懂,metrics的具体...

  • 关于模型评估指标,可比性,LOSS,AUC,上下限

    模型评估可以从多维度多指标进行评估。 这里只谈论指标。我们常用的指标,logloss,mse,auc(GAUC)等...

  • 2019-05-30(模型评估方法)

    参考原文 混淆矩阵 评估指标 基本评估指标 召回率(recall)\灵敏度(sensible):TP / (TP ...

  • 模型评估——评估指标的局限性

    在模型评估过程中,往往对于不同的模型,需要不同的指标进行评估,在众多评估指标中,大部分指标只能反映模型的部分性能,...

  • KPI(关键绩效指标法)

    KPI:把对绩效的评估简化为对几个关键指标的考核,将关键指标当作评估标准,把员工的绩效与关键指标作出比较地评估方法...

网友评论

      本文标题:【评估指标】广告/推荐评估指标 NDCG

      本文链接:https://www.haomeiwen.com/subject/gzloiktx.html