u013547304的博客

多元线性回归法也是深度学习的内容之一，用java实现一下多元线性回归。一元线性回归的公式为 y =  a*x + b, 多元线性回归的公式与一元线性回归的公式类似，不过是矩阵的形式，可以表示为Y =　AX + b，其中，Y是样本输出的合集，X是样本输入的合集。多元线性回归最终求解的内容也就是 A 和 B， 这里省去求证步骤，直接列出求解 A 和 B 矩阵的公式，公式如下：（这里的X是样本输入的合集...

梯度下降法，就是求函数在某一点的导数/偏导数，在该方向上，函数的变化率最大，也就是说，在优化目标函数的时候，只要按照梯度的负方向优化即可。为了更好的理解梯度下降法，首先，求解一个一元二次函数的系数，为了方便计算，假设方程为最终的要求，就是求出k值。首先，我们设定误差函数为其中，Y是实际输出，Out是通过前向计算得到的结果。基于该公式，我们可以得到误差函数的导数但是在实际的计算过程中，我发现了一个问...