分位数回归

作者: 虚胖一场 | 来源:发表于2019-12-04 16:34 被阅读0次

本文链接个人站 | 简书 | CSDN
版权声明:除特别声明外,本博客文章均采用 BY-NC-SA 许可协议。转载请注明出处。

Z 表示一个随机变量,其概率密度函数为 f(z),累积分布函数为 F(z)。定义函数
L(Z, \hat Z)=\rho\cdot\max(Z-\hat Z, 0)+(1-\rho) \cdot \max(\hat Z-Z, 0)

其中 \hat Z\in \mathbb R\rho\in(0,1)。求使得 L(Z,\hat Z) 的期望最小的 \hat Z 的取值。

L(Z,\hat Z) 的期望为
\begin{aligned} \mathbb{E}[L(Z,\hat Z)] &= \int_{-\infty}^{+\infty}L(z,\hat Z)f(z)\mathrm dz\\ &= \rho\int_{\hat Z}^{+\infty}(z-\hat Z)f(z)\mathrm dz + (1-\rho)\int_{-\infty}^{\hat Z}(\hat Z - z)f(z)\mathrm dz \end{aligned}


\begin{aligned} \frac{\partial \mathbb{E} [L(Z,\hat Z)]}{\partial \hat Z} &= 0\\ &=-\rho\int_{\hat Z} ^{+\infty}f(z)\mathrm dz+(1-\rho)\int_{-\infty}^{\hat Z}f(z)\mathrm dz\\ &=-\rho[1-F(\hat Z)]+(1-\rho)F(\hat Z)\\ &=F(\hat Z)-\rho \end{aligned}
解得
\hat Z^*=F^{-1}(\rho)

即使得 L(Z,\hat Z) 的期望最小的 \hat Z 的取值为 Z\rho 分位数。

DeepAR 等模型中,我们的预测目标是某个确定形式的概率分布的参数,通过最大化对数似然来优化网络。如果我们把预测的目标改为分位数,用 L(\cdot) 作为损失函数呢?下图是实验的结果:

DeepAR 分位数预测

看起来也不错。且这种方式并不预先假设分布的具体形式,似乎更加通用一些。

相关文章

  • 分位数回归学习笔记

    一、分位数回归概念 分位数回归是估计一组回归变量X与被解释变量Y的分位数之间线性关系的建模方法。 以往的回归模型实...

  • 分位数回归-Quantile regression

    [toc] 一、分位数回归概念 分位数回归是估计一组回归变量X与被解释变量Y的分位数之间线性关系的建模方法。 以往...

  • 分位数回归

    本文链接:个人站 | 简书 | CSDN版权声明:除特别声明外,本博客文章均采用 BY-NC-SA 许可协议。转载...

  • 分位数回归

    由于各种原因,回归系数可能不稳定。回归分析要求因变量Y为正态分布,并对异常值较为敏感,异常值问题和共线性问题、异方...

  • 分位数回归

    tau越大,对正error的惩罚越大:0 --> 1 ,从-relu变化到relu

  • 高级回归模型(1):分位数回归

    分位数回归 说明 中文说明 英文PPT 作图 散点图和拟合线 根据需要,按分位数分别回归和分别预测,然后合并作图。...

  • 统计分析的一些R包和函数

    横截面数据回归经典方法 quantreg分位数回归 MASSBOX-COX变换 survival生存函数、COX比...

  • Stata: 分位数回归简介

      作者: 武翰涛 (南京邮电大学)Stata 连享会: 知乎 | 简书 | 码云 | CSDN | Stata...

  • 分位数回归法计算VaR

    一、知识点 之前讲完了历史模拟法和蒙特卡罗模拟法计算VaR和ES,接下来要讲的是分位数回归法。回归法的目标和做法是...

  • 我的R学习札记——箱图简单例子

    箱图主要是用最小值、下四分位数(第25百分位数)、中位数(第50百分位数)、上四分位数(第75百分位数)以及最大值...

网友评论

    本文标题:分位数回归

    本文链接:https://www.haomeiwen.com/subject/nghlgctx.html