正规方程法处理正则化后的线性回归,解决过拟合

原创 2018-04-08 00:00 阅读(315)次

没有正则化的线性回归正规方程法可以看这边 : 线性回归之正规方程法求解

正规方程法是通过 这个推导出的,现在 

带入求导可推出(推导过程略,都是数学的东西)

andrew ng在他的视频中推导出了结果:

跟未正则化的正规方程法相比,增加了λ 和一个 (n+1)* (n+1)的矩阵的相乘,n是样本的特征项数。

这个矩阵和单元矩阵略有不同,差别是第1行第1列的位置为0而不是1。

本文完。

本站作品的版权皆为作品作者所有。

本站文字和内容为本站编辑或翻译,部分内容属本站原创,所以转载前务必通知本站并以超链接形式注明内容来自本站,否则以免带来不必要的麻烦。

本站内容欢迎分享,但拒绝有商业目的的转载!