线性回归算法

原文地址：http://blog.kamidox.com/gradient-descent.html

                梯度下降算法流程图：

 

                 

                正则化：

                        定义：  

                               解决模型过拟合问题的一种方法。保留所有特征，减少特征的权重的值，确保

                        所有的特征对预测值都有少量的贡献。

                        公式：

                              成本函数：

                                     

                              迭代函数：