机器学习拟合效果评价_机器学习——过拟合问题（线性回归+逻辑斯特回归的正则化推导）...

1.前言

前面已经推导过线性回归和逻辑斯特回归的梯度下降算法。

• 线性回归的梯度下降算法：https://zhuanlan.zhihu.com/p/108625608
• 逻辑斯特回归的梯度下降算法：https://zhuanlan.zhihu.com/p/109045510

它们各自的梯度下降算法公式为：

• 线性回归：
• 逻辑斯特回归：
  其中
  为sigmoid函数

2.过拟合问题及其解决方法

如上图，左图展示了一个拟合曲线不能很好的拟合数据&#