线性回归 least square method 笔记

对视频https://www.youtube.com/watch?v=JvS2triCgOY所作的笔记

给出大量数据(xk, yk)，我们要据此找出线性回归线，即是变量y随着变量x变化的规律，即是y = b0 + b1 * x

1. 取所有x值的均值a与所有y值的均值b，所有回归线都会经过这个点(a,b)

2. 算出所有样本点(x1,y1)……(xn,yn)到均值点(a,b)的x距离与y距离
   所有x距离： x1 - a, x2 - a, …… xn - a
   所有y距离： y1 - b, y2 - b, …… yn - b

   
   距离差

3. 计算(x - x均值)^2, 与(x - x均值) * (y - y均值)

   
   计算

4. 用公式计算出斜率b1

   
   斜率b1计算

5. 利用回归线必经过均值点(a, b)这一性质算出b0

   
   b0计算