深度学习
bboysky45
一个没有感情的量化研究员
展开
-
深度学习中的batch、epoch、iteration的含义
深度学习的优化算法,说白了就是梯度下降。每次的参数更新有两种方式。第一种,遍历全部数据集算一次损失函数,然后算函数对各个参数的梯度,更新梯度。这种方法每更新一次参数都要把数据集里的所有样本都看一遍,计算量开销大,计算速度慢,不支持在线学习,这称为Batch gradient descent,批梯度下降。另一种,每看一个数据就算一下损失函数,然后求梯度更新参数,这个称为随机梯度下降,stochast...原创 2018-07-02 14:10:07 · 86614 阅读 · 33 评论 -
keras常用用法
激活函数类型softmax、elu、softplus、softsign、relu、tanh、sigmoid、hard_sigmoid、linear1.Dense(全连接层)<code class="language-python">keras.layers.core.Dense ( units, activation=None, use_bias=True, kernel_initia...转载 2018-07-02 15:52:51 · 978 阅读 · 0 评论