梯度下降

理解：
怎么剃度下降，就是不断像理想结果靠拢呢@冥冥之中
@追 通过网络预测得出的结果叫预测值。label可以理解为真实值。学习的目的就是让网络的预测值＝真实值。
当预测值和真实值，不相等时，
我们可以利用他们的差值。得出损失函数。
也就是说学习的目的就是不断地减少损失函数。而梯度下降就是一个快速减少损失函数的方法。

怎么剃度下降，就是不断像理想结果靠拢呢@冥冥之中
@追 损失函数等于零就是理想结果。而梯度下降的目的就是为了让损失函数等于零。

 

 

所谓梯度就是偏导数，求导数最大的加一个负数就是下降最快的方向。损失函数，求解损失函数最小的方法。