美文网首页
极大似然估计

极大似然估计

作者: ArronZhang1997 | 来源:发表于2021-04-11 23:40 被阅读0次

1. 什么是似然函数?

本质是关于随机数X的概率密度函数,只不过没有给定参数.
概率密度函数反映的是给定X值 的事件发生概率 (即使是连续值也可以用离散的理解方式来理解)
举例, 抛硬币的结果只有正面和反面,把正面记为 H, 反面记为 T, 假设n次实验中出现k个正面,这是个二项分布,假设参数 \theta 代表掷到正面的概率,那么其似然函数为:
P(X = k) = \binom{n}{k} \theta^k(1-\theta)^{n-k} (k = 1,2,3,4...)

2. 如何用最大似然估计估计似然函数的参数值?

本质上就是求\theta, 利用X的样本数据. 比如我们扔了10组硬币,每次扔20次,记录其中正面的次数记作X_{i} i= 1,2,3...10, 那么求\theta的方法如下:

  1. n = 20X_{i}代入10个样得到10个概率密度函数
  2. 将这10个函数相乘得到一个新的函数
  3. 把这个函数对\theta求导, 令导数值为0,求得\theta

至此,求值完毕,把\theta代入原来的似然函数,得到X的概率密度函数.

相关文章

  • 极大似然估计

    极大似然估计 以前多次接触过极大似然估计,但一直都不太明白到底什么原理,最近在看贝叶斯分类,对极大似然估计...

  • 极大似然估计

    极大似然估计(Maximum Likelihood Estimation,MLE),也称最大似然估计。“似然”是对...

  • 极大似然估计

    序 极大似然估计和最大后验估计是机器学习中常用的两种参数估计方法。本次记录MLE的原理和用法,为后续推导LR等目标...

  • 极大似然估计

    动机 在学习机器学习算法过程中,发现很多算法策略都采用极大似然估计, 如:线性、逻辑回归,决策树,隐马尔科夫模型。...

  • 极大似然估计

    极大似然估计是一种参数估计的方法(知模型求参数)。先验概率是 知因求果,后验概率是 知果求因,极大似然是 知果求最...

  • 极大似然估计

    现实情况中我们可能会遇到这样的一些例子,需要得到一所高校有车学生的分布情况(假定符合参数为p的伯努利分布),某地区...

  • 极大似然估计

    似然函数 似然函数(likelihood function)是一种关于统计模型中的参数的函数,既然是函数那自变量就...

  • 极大似然估计

    极大似然估计 我们也可以理解为最像估计法或者最可能估计法。 通俗理解:对于一个事件的发生我们的猜测是基于一...

  • 极大似然估计

    1. 什么是似然函数? 本质是关于随机数X的概率密度函数,只不过没有给定参数.概率密度函数反映的是给定值 的事件发...

  • 极大似然估计

    极大似然估计[https://zhuanlan.zhihu.com/p/26614750]

网友评论

      本文标题:极大似然估计

      本文链接:https://www.haomeiwen.com/subject/vihzkltx.html