qq_42696551的博客

原创 梯度下降原理（个人理解）

梯度下降 基本概念： 梯度下降是在监督学习中，为了优化模型参数，求出损失函数J(θi)(loss function)取得最小值时，对应的参数θ值的一种迭代算法 数学公式： ​ 对于一般的线性回归，假设函数可表示为： hθ(x)=θ0x0+θ1x1+θ2x3+...+θnxn h_\theta(x) = \theta_0x_0 + \theta_1x_1 + \theta_2x_3 + ... + ...