基础优化方法 这个图可以直观的看出寻找最优解的路线 梯度下降 有显示解的模型都非常简单,但我们以后几乎解决的问题都是没有显示解的 当一个模型没有显示解的时候怎么办呢? 下面来讲一下梯度下降: 梯度下降通过不断沿着反梯度方向更新参数求解 挑选一个参数的随机初始值w0 重复迭代参数t=1,2,3(在接下来的时刻里不断更新w0,来接近我们的最优解) (上图为更新法则&#