美文网首页
[线性回归] 正规方程的不可逆性

[线性回归] 正规方程的不可逆性

作者: JaiUnChat | 来源:发表于2017-01-01 22:08 被阅读288次

有时候XTX是不可逆的(奇异矩阵)。
造成不可逆的原因通常是以下两个:

  • 有冗余特征: 有两个特征之间存在着一定联系,比如一个单位x1是米,另一个x2单位是千米,但表示的是同一个特征,这时候这两个特征之间存在着关系x2=x1。 根据线性代数的知识, 线形相关的矩阵不可逆的。
  • 特征数n>训练集数m

相关文章

网友评论

      本文标题:[线性回归] 正规方程的不可逆性

      本文链接:https://www.haomeiwen.com/subject/mjwivttx.html