机器学习
付石头_stone
这个作者很懒,什么都没留下…
展开
-
为什么说随机最速下降法(SGD)是一个很好的方法?
[本文主要介绍SGD算法,和两篇分析它逃离鞍点的论文: 我与鬲融,金驰,黄芙蓉写的Escaping From Saddle Points – Online Stochastic Gradient for Tensor Decomposition, 以及由金驰,鬲融等人写的最新力作:How to Escape Saddle Points Efficiently]假如我们要优化一个函数 ,即找到它的最转载 2017-12-14 15:18:18 · 1990 阅读 · 0 评论 -
深入理解RNN和LSTM
版权声明:转载请注明出处 https://blog.csdn.net/zhaojc1995/article/details/80572098 本文部分参考和摘录了以下文章,在此由衷感谢以下作者的分享! https://zhuanlan.zhihu.com/p/28...转载 2018-10-08 21:50:35 · 564 阅读 · 0 评论 -
梯度下降、随机梯度下降、批量梯度下降
前言最近实验集体学习机器学习,其中涉及到梯度下降及其变体,不是很清楚,看了好多资料和博客。在这里整理总结一下。如果哪里写得不对,请大家指正。一、梯度下降(GD)       原创 2018-09-26 15:17:38 · 1647 阅读 · 0 评论 -
拉格朗日乘子法(Lagrange Multiplier) 和KKT条件
在求取有约束条件的优化问题时,拉格朗日乘子法(Lagrange Multiplier) 和KKT条件是非常重要的两个求取方法,对于等式约束的优化问题,可以应用拉格朗日乘子法去求取最优值;如果含有不等式约束,可以应用KKT条件去求取。当然,这两个方法求得的结果只是必要条件,只有当是凸函数的情况下,才能保证是充分必要条件。KKT条件是拉格朗日乘...转载 2018-09-20 14:59:07 · 211 阅读 · 0 评论 -
支持向量机入门及公式推导
版权声明:本文为博主原创文章,未经博主允许不得转载。 本文转自(文章源链接如下):https://blog.csdn.net/sinat_20177327/article/details/79729551 一、简介支持向量机(support vecto...转载 2018-09-20 14:50:43 · 2032 阅读 · 0 评论 -
详解最大似然估计(MLE)、最大后验概率估计(MAP),以及贝叶斯公式的理解
<svg xmlns="http://www.w3.org/2000/svg" style="display: none;"><path stroke-linecap="round" d="M5,0 0,2.5 5,5z" id="raphael-marker-block" style="-webkit-tap-highlight-color:转载 2018-09-19 20:13:19 · 1659 阅读 · 0 评论 -
SARSA与Q-learning的区别
莫烦强化学习视频 https://morvanzhou.github.io/tutorials/machine-learning/reinforcement-learning/SARSA与Q_learning的区别:https://morvanzhou.github.io/tutorials/machine-learning/reinforcement-learning/3-1-tabular...转载 2018-08-29 11:20:28 · 7987 阅读 · 3 评论 -
监督学习和无监督学习区别
前言机器学习分为:监督学习,无监督学习,半监督学习(也可以用hinton所说的强化学习)等。在这里,主要理解一下监督学习和无监督学习。监督学习(supervised learning)从给定的训练数据集中学习出一个函数(模型参数),当新的数据到来时,可以根据这个函数预测...转载 2018-08-24 21:42:02 · 198761 阅读 · 6 评论 -
强化学习入门
版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/aliceyangxi1987/article/details/73327378 ...转载 2018-08-28 14:52:17 · 274 阅读 · 0 评论 -
LSTM原理及实现
文章目录title: LSTM原理及实现date: 2018-02-10 10:49:21tags:categories: 深度学习LSTM网络LSTM核心思想逐步理解LSTM遗忘门输入门输出门LSTM变体多层LSTMLSTM实现手写数字设置LSTM参数初始化权值参数训练参考资料这篇博客前面原理部分是colah博客的翻译,后面一部分为自己结合实际实际代码的理解。LSTM网络long s...转载 2019-03-25 10:59:49 · 2063 阅读 · 0 评论