基础算法
文章平均质量分 88
云里数里
这个作者很懒,什么都没留下…
展开
-
算法基础梳理 任务1:线性回归
1、线性回归损失函数的极大似然推导:西瓜书公式3.4除了用最小二乘法以外,怎么用极大似然推得? 2、一元线性回归的参数求解公式推导:西瓜书公式3.7和3.8怎么推来的? 3、多元线性回归的参数求解公式推导:西瓜书公式3.10和3.11怎么推来的? 4、线性回归损失函数的最优化算法:什么是批量梯度下降、随机梯度下降、小批量梯度下降? (一)批量梯度下降(Batch Gradient Desce...原创 2019-01-27 20:38:36 · 273 阅读 · 0 评论 -
基础算法2:逻辑回归相关
一、Logistic回归损失函数的极大似然推导:西瓜书公式3.27怎么推来的? 二、Logistic回归损失函数的最优化算法:什么是牛顿法、拟牛顿法? 答: 牛顿法 假设我们求下面函数的最小值: 假设f(x)具有连续的二阶的连续偏导数,假设第K次迭代值为xk的值,那么可将f(X)在xk附近进行二阶泰勒展开得到: 我们对上述公式求导可得: 假设其中可逆,我们就可以得到牛顿法的迭......原创 2019-01-30 12:38:37 · 428 阅读 · 0 评论