第六章：数理统计中常用的3个分布

作者: cheerss | 来源:发表于2019-12-06 11:50 被阅读0次

抽样分布
1.2常用分布族
第六章：数理统计中常用的3个分布
【概率论三】数理统计
第一章算法基础——概率论与数理统计基础
概率论与数理统计笔记第二章随机变量及其概率分布
(数理统计基础1)基本概念
数理统计-参数估计
统计学学习笔记
墨尔本MAST20005/MAST90058 课业解析

1. 基本概念

均值和方差

分布均值、方差是 $\mu$ 和 $\sigma$ 。这两个是定值，不随着采样的变化而变化。

样本均值、样本方差是 $\bar{X}$ 和 $S^2$ 。这两个值是根据样本计算出来的，采样不同，自然值也不同。其中 $\bar{X} = \frac{1}{n}\sum_{i=1}^{n}x_i$ ， $S^2 = \frac{1}{n-1}\sum_{i=1}^{n}(x_i - \bar{X})^2$

在数理统计中， $\bar{X}$ 是 $\mu$ 的无偏估计，而 $S^2$ 是 $\sigma$ 的无偏估计。

K阶距

$B_K = \frac{1}{n}\sum_{i=1}^n(x_i-\bar{X})^k$

$A_K = \frac{1}{n}\sum_{i=1}^nx^k_i$

其中 $A_k$ 是k阶原点距， $B_k$ 是k阶中心距。二阶中心距也是方差的一个估计，但是是有偏估计。

下面开始说重点： $\chi^2$ 分布、t分布、F分布是数理统计中最常用、最重要、最核心的3个分布，也是区间估计、假设检验、方差分析等的基础。这三个分布的概率密度和分布函数是怎么推导出来的我不知道，但是推导起来一定不轻松，对于大部分使用者来说也不必记忆和学会推导这些内容，只需要记住其中一些重要的结论即可，例如：三种分布是怎么来的，它们的的均值、方差是多少，函数图像大概长什么样子。

2. 卡方分布

卡方分布（ $\chi ^2分布$ ）是相互独立的、0-1正态分布的平方和，即：

$\chi_n^2 = \sum_{i=1}^nx^2_n，其中x_i \sim N(0, 1)$

此时，我们说它是自由度为n的卡方分布。

我觉得这个东西不用记

这个图有点神奇

重要性质

1. $E(\chi^2) = n, D(\chi^2) = 2n$

2. 卡方分布满足可加性，即两个相互独立的卡方分布的和依然是卡方分布（注意，必须相互独立）

3. t分布

t分布是一个0-1正态分布除以一个卡方分布开根号，即

$T = \frac{X}{\sqrt{Y/n}},其中，X \sim N(0, 1), Y \sim \chi^2(n), 记为T \sim t(n)$

我觉得这个也不用记

t分布的概率密度函数

4. F分布

F分布是两个卡方分布的商，即：

$F = \frac{X/n_1}{Y/n_2},其中X \sim \chi^2(n_1), Y \sim \chi^2(n_2)$ ，

n1和n2称为第一和第二自由度

重要性质

1. F分布的倒数的第一第二自由度刚好相反的F分布

F分布的概率密度函数

数理统计中的一些常识

设 $X_1, X_2, X_3...X_n$ 相互独立的服从 $N(\mu, \sigma^2)$ 的随机变量，其中 $\bar{X} 和 S^2$ 分别为样本的均值和方差。则：

1. $\frac{(n-1)S^2}{\sigma^2} = \frac{\sum_{i=1}^{n}(X_i - \bar{X})^2}{\sigma^2} \sim \chi^2(n-1)$

2. $\frac{\sum_{i=1}^{n}(X_i - \mu)^2}{\sigma^2} \sim \chi^2(n)$

3. $\bar{X} 与S^2相互独立$

4. $\frac{\bar{X} - \mu}{S/\sqrt{n}} \sim t(n-1)$

5. $D(\bar{X}) = \frac{\sigma^2}{n}， E(S^2) = \sigma^2，D(S^2) = \frac{2\sigma^4}{n-1}$

6. $Cov(X_1, \bar{X}) = \frac{\sigma^2}{n}, \rho_{X_1, \bar{X}} = \frac{1}{\sqrt{n}}$

设 $X_1, X_2, X_3...X_n$ 服从 $N(\mu_1, \sigma^2_1)$ ； $Y_1, Y_2, \cdots, Y_n$ 服从 $N(\mu_2, \sigma^2_2)$ ，所有样本相互独立且样本方差分别为 $S_1^2$ 和 $S^2_2$ 。则：

1. $\frac{S_1^2 / \sigma_1^2}{S_2^2 / \sigma_3^2} \sim F(n_1-1, n_2-2)$

2. $\frac{(\bar{X} - \bar{Y}) - (\mu_1 - \mu_2)}{\sqrt{\frac{\sigma_1}{n_1}+\frac{\sigma_2}{n_2}}} \sim N(0, 1)$

3. 当 $\sigma^2 = \sigma_1^2 = \sigma_2^2$ , $\frac{(\bar{X} - \bar{Y}) - (\mu_1 - \mu_2)}{S_w\sqrt{1/n_1 + 1/n_2}} \sim t(n_1 + n_2 - 2)$ , 其中 $S_w = \sqrt{\frac{(n_1-1)S_1^2 + (n_2-1)S_2^2}{n_1 + n_2 - 2}}$

抽样分布
本篇内容来自《概率论与数理统计》第四版，浙江大学。 1 随机样本 2 抽样分布 2.1 几个常用统计量的分布
1.2常用分布族
本文将总结数理统计中常用的分布函数，从以下几个方面进行阐述：密度函数式子定义域变量与图像关系函数之间关系 ...
第六章：数理统计中常用的3个分布
1. 基本概念均值和方差分布均值、方差是和。这两个是定值，不随着采样的变化而变化。样本均值、样本方差是和。这...
【概率论三】数理统计
数理统计 1. 三大抽样分布分布设则记为性质故具有可加性. 分布设且相互独立, 则...
第一章算法基础——概率论与数理统计基础
1.3 概率论与数理统计基础算法常涉及数据分布情况，而这些分布又与概率紧密相连，常见的分布方式包括二项分布、超几...
概率论与数理统计笔记第二章随机变量及其概率分布
# 概率论与数理统计笔记第二章随机变量及其概率分布概率论与数理统计笔记（计算机专业）作者： [CATPUB]...
(数理统计基础1)基本概念
数理统计的直观理解数理统计学存在的意义：某工厂生产了大批的电子元件，一般来说，假定该电子元件的寿命服从指数分布...
数理统计-参数估计
数理统计的工作是从总体 X 中抽取样本，对总体 X 的分布或某些特性进行分析推断。完全由样本决定的量，称为统计量...
统计学学习笔记
概率论随机事件和概率及其分布随机事件变异概率分布数理统计统计资料类别及其展示统计资料类别连续和离散...
墨尔本MAST20005/MAST90058 课业解析
题意：概率论与数理统计中的几个小鳀解析问题1：使用R语言统计数据生成图像；假设服从正态分布，计算参数的极大似...