ReLU函数
a1111111111ss
本人博客都是学习笔记有原创也有转载并不是为了盈利,为了有个地方放笔记顺便也分享一下自己学习笔记,
展开
-
机器学习的卷积神经网络(CNN)
本文首发https://blog.csdn.net/qq_25762497/article/details/51052861#%E5%85%A8%E8%BF%9E%E6%8E%A5%E5%B1%82fully-connected-layer**卷积神经网络(CNN)卷积神经网络跟普通的神经网络相似,他们都具有可学习的权重和偏执常量的神经元组成卷积神经网络是具有三维体积的神经元(是比较抽象...原创 2020-05-03 10:53:50 · 912 阅读 · 0 评论 -
深度学习ReLU激活函数
ReLU激活函数在深度学习中,有修正线性单元(Rectified linear unit,ReLU)的激活函数x轴是时间,y轴是放电速度神经元的工作方式:1、稀疏性2、分布性我们开始介绍ReLU激活函数首先,我们来看一下ReLU激活函数的形式从图中可以看出来ReLU函数他是一个分段的函数在一边都让他是0另一边随着数据的增大而变大这种操作被成为单侧抑制。有了单侧抑制,才让神经...原创 2020-05-03 09:49:49 · 1299 阅读 · 0 评论