美文网首页数据科学
大数定理和中心极限定理

大数定理和中心极限定理

作者: sparkshen | 来源:发表于2020-03-09 17:01 被阅读0次

估计99.99999%的人学完这个定理,都不知道这俩定理是干嘛的。

大数定理:样本均值依概率收敛到期望

通俗点说,大数定理就是数量足够大的样本,能几乎肯定的反应出总体的真实组成:https://www.zhihu.com/question/20388614。这意味着,我们放心的去抽样,去monte carlo一定不会出错。映射到大数据相关领域的计算上,因为样本数量足够多,所以在大样本量上找到的规律,也一定能反应总体的真实规律。这大概是机器学习算法有效的数学根基。

中心极限定理是说,一个随机变量X,不管他的分布多稀奇古怪,只要期望和方差存在,总是可以通过两个步骤,转变成一个服从正态分布的统计量。

1. 固定样本容量,无穷次抽样

2. 计算样本上的各种形式的和-Y

这个统计量就服从正太分布,这样我们研究的随机变量就从X,变成了Y。正态分布比较见到那,相对好研究,问题就简化了。中心极限定理,看起来有点像bootstrapping的场景。

https://www.cnblogs.com/LittleHann/p/9569708.html


一段很有趣的描述:

0x1:中心极限定理和大数定律的区别

中心极限定理是随机变量和的分布收敛到正态分布的一类定理,而随机变量的和又和随机变量的均值有密切的联系,而大数定律论证的主要部分就是随机变量均值的收敛性特点,因此,中心极限定理和大数定律之间有千丝万缕的联系。

大数定律是说,n只要越来越大,把这n个独立同分布的数加起来去除以n得到的这个样本均值(也是一个随机变量)会依概率收敛到真值u,但是样本均值的分布是怎样的我们不知道

中心极限定理是说,n只要越来越大,这n个数的样本均值会趋近于正态分布,并且这个正态分布以u为均值,sigma^2/n为方差

综上所述,这两个定律都是在说样本均值性质。随着n增大,大数定律说样本均值几乎必然等于均值。中心极限定律说,它越来越趋近于正态分布,并且这个正态分布的方差越来越小。


相关文章

  • 中心极限定理与大数定律

    中心极限定理通俗介绍 中心极限定理收敛至大数定律 什么是中心极限定理(Central Limit Theorem)...

  • 三大抽样分布与检验:卡方分布,t分布和F分布及其相关检验

    1、基石:大数定律和中心极限定律 大数定理。不管是强大数定理还是弱大数定理,都表达着这样一个意思:当样本数量足够大...

  • 第一课 数学基础

    1. 牛顿法 2.贝叶斯公式 3.大数定律和中心极限定理 大数定律 中心极限定理 4. 参数估计 点估计:矩估计 ...

  • 中心极限定理的matlab演示

    在中心极限定理之前先说一下大数定理 大数定理(弱大数定理):假如随机变量,...相互独立,服从同一分布,具有相同的...

  • 大数定理和中心极限定理

    估计99.99999%的人学完这个定理,都不知道这俩定理是干嘛的。 大数定理:样本均值依概率收敛到期望 通俗点说,...

  • 大数据统计基础第七周笔记

    切比雪夫不等式 弱大数定理 伯努利大数定理 独立同分布的中心极限定理 Lyapunov定理 二项分布近似正态分布 ...

  • 讲讲大数定理

    转自:俊红的数据分析之路 的 讲讲大数定理 前面我们讲过中心极限定理,没看过的同学可以去看看:讲讲中心极限定理。这...

  • 中心极限定理与大数定理

    一、中心极限定理1、定义(1)样本的平均值约等于总体的平均值。(2)不管总体是什么分布,任意一个总体的样本平均值都...

  • 14-假设检验之卡方检验

    1、大数定律 当样本数量足够大时,这些样本的均值无限接近总体的期望。 2、中心极限定理 从一个任意总体(由大数定理...

  • 抽样分布

    中心极限定理(Central Limit Theorem) 中心极限定理帮助我们了解以下事实,无论总体的分布是否为...

网友评论

    本文标题:大数定理和中心极限定理

    本文链接:https://www.haomeiwen.com/subject/fvipdhtx.html