美文网首页
从一张图出发去理解敏感度、特异度和ROC

从一张图出发去理解敏感度、特异度和ROC

作者: ADO_AI | 来源:发表于2021-09-12 23:21 被阅读0次
图一、同一指标在正常和癌症人群的分布曲线

一、开门见山:敏感度,特异度 or ROC曲线,它反应的都是某种检验指标或者模型对正常/疾病 人群的分类能力,而这种分类能力是什么?就是\color{red}{指标在两个人群的分布重叠度!!} 指标分布重叠越少,该指标对人群的分类能力越强,该指标越好;反之越差

二、真实分布:对于一个检验指标,其真实人群的分布几乎都是如此:得病的人群分布相对右偏,无病的人分布相对低,两者间有重叠。给指标设定任意一个cutoff值,都会得到对应的敏感度,特异度,进而对应ROC曲线上的一个点; 对cutoff取连续值(通常是取所有的观察结果或预测概率值),即得到ROC曲线,而ROC曲线的本质含义就是反应指标的分类能力。

三、理想分布:理想的指标是两个人群分布完全没有重叠,此时ROC曲线下面积为1,不过理想指标往往仅仅存在于“理想”中。之所以ROC曲线下面积为1,是因为此时一定存在一个连续区间(即两分布中间的那个区间),以此连续区间内的值作为cutoff时,敏感度和特异度均为100%。

四、敏感度、特异度的含义(从混淆矩阵出发)

图二、混淆矩阵
  • 敏感度 = TP/(TP+FP);提升敏感度是为了更好地将有病的人筛选出来

  • 特异度 = TN/(TN+FN);提升特异度是为了更好地将正常的人筛选出来

  • 要同时提升敏感度和特异度,就是指标/模型本身足够好,在人群中的分布重叠足够小。这样的指标/模型对人群的分类能力强,敏感度和特异度自然高。可以说,\color{red}{敏感度、特异度是指标/模型固有分类能力的体现}

  • 然而对于同一指标/模型,不同的cutoff值情况下,其敏感度和特异度是可以动态变化的:

    • 不同cutoff值对应不同敏感度和特异度,进行描点即得到ROC曲线,曲线下面积体现的是指标/模型的固有分类能力大小;
    • 不同cutoff值对应不同敏感度和特异度,经过权衡选取一cutoff值用作最终分类标准
    • 不同cutoff值对应不同敏感度和特异度,在一定区间内,敏感度和特异度的增长呈现相反趋势:原因在于降低cutoff值使得指标/模型更倾向于将结果预测为positive:TP、FP都提升,当然TP/(TP+FP)整体是提升的;与之俱来的是预测结果Negative的减少,TN和FN同步减少,在某些情况下会导致特异度降低
    • 图一出发理解cutoff值的变化对敏感度和特异度的影响:


      图三、高铁呕吐袋所作不同cutoff下的敏感度和特异度变化曲线
  • 1.敏感度在cutoff小于2的时候,恒为1,cutoff在2-100之间上升时,敏感度单调下降直至0。

    1. Cutoff小于0时,特异度为0,cutoff在0-10之间增长时,特异度单调递增至1。
    1. 最佳cutoff值应在2-10之间,在这个区间内,敏感度和特异度的变化趋势相反,敏感度降低特异度增高

参考文献

联川生物--ROC曲线讲解

相关文章

  • 从一张图出发去理解敏感度、特异度和ROC

    一、开门见山:敏感度,特异度 or ROC曲线,它反应的都是某种检验指标或者模型对正常/疾病 人群的分类能力,而...

  • 读书=更高的敏感度+知识边界

    读书=更高的敏感度+知识边界 萌姐的复盘给了我的启发: 1.颠覆认知。只是理解表象性的问题和事物。 2、敏感度+知...

  • 探秘MPAndroid

    MPAndroid 柱状图 前言 人们对图像接收的敏感度远超对文字的敏感度,特别是针对部分数据统计和展示的时候,有...

  • 第18讲作业-紫天鹅

    如何培养写作观察敏感度 我理解的作业要求,是由身边的一个点,捋出主题和观点,再通过仔细观察和思维发散多多搜寻素材,...

  • 科研日记13

    每次都会被自己打脸。我在继上次手动计算敏感度、特异度等指标之后不久,就学会了怎么计算。 原来SPSS里面交叉表只要...

  • 赵京:入行第一个月保费超300万,专业不是吹嘘,专业只是基本功

    “两天出一张大单,两天出一张大单”。刚入行的时候,得益于产品优势和销售敏感度,赵京旗开得胜。但成绩越好心里越虚,自...

  • 理解ROC和AUC

    ROC ROC的定义 比方说在一个10000个人的数据集中,有100个人得了某种病症,你的任务是来预测哪些人得了这...

  • 怎样赢得欣赏,在社交圈收获好人缘

    学会观察,提高你的人际敏感度 一、人际敏感度的重要性: 我们学习DISC理论的目的是为了: 1、了解自己,理解他人...

  • 提醒:出现三种症状证明耳朵受损

    耳朵的听力受损有三大表现:高频受损、敏感度提高和听力下降。 敏感度提高:我们耳朵的敏感度的提高,会使得声音有些变化...

  • 出现三种症状证明耳朵受损

    耳朵的听力受损有三大表现:高频受损、敏感度提高和听力下降。 敏感度提高:我们耳朵的敏感度的提高,会使得声音有些变化...

网友评论

      本文标题:从一张图出发去理解敏感度、特异度和ROC

      本文链接:https://www.haomeiwen.com/subject/alfqgltx.html