深度学习
文章平均质量分 92
顧辰
这个作者很懒,什么都没留下…
展开
-
单层感知机(Single Layer Perceptron)原理及Matlab实现
单层感知机(Single Layer Perceptron)原理及Matlab实现前言单层感知机学习策略损失函数的构造损失函数的最优化求解matlab实现动态可视化过程前言本文参考李航老师的《统计学习方法》,使用matlab实现简单的单层感知机(single layer perceptron)模型。单层感知机单层感知机作为一种简单的线性二分类模型,是神经网络(Neural Network)...原创 2020-05-07 17:30:04 · 6963 阅读 · 4 评论 -
梯度下降(二):自适应梯度(AdaGrad)、均方根传递(RMSProp)、自适应增量(AdaDelta)、自适应矩估计(Adam)、Nesterov自适应矩估计(Nadam)
梯度下降(二):自适应学习率(AdaGrad)、均方根传递(RMSProp)、自适应增量(AdaDelta)、自适应性矩估计(Adam)Nesterov自适应性矩估计(Nadam)前言自适应梯度(AdaGrad / Adaptive Gradient)均方根传递(RMSProp / Root Mean Square Propagation)自适应增量(AdaDelta)自适应矩估计(Adam /...原创 2020-04-26 02:05:49 · 8604 阅读 · 5 评论 -
梯度下降(一):批梯度下降、随机梯度下降、小批量梯度下降、动量梯度下降、Nesterov加速梯度下降法 Matlab 可视化实现
梯度下降、随机梯度下降、小批量梯度下降、动量梯度下降、Nesterov加速梯度下降法前言梯度下降法(Gradient Descent / GD)单变量线性回归模型(Univariate Linear Regression)批梯度下降法(Batch Gradient Descent)随机梯度下降法(Stochastic Gradient Descent / SGD)小批量梯度下降(Mini-batc...原创 2020-04-23 01:23:42 · 9456 阅读 · 3 评论