- 博客(2)
- 资源 (1)
- 收藏
- 关注
原创 前向传播与反向传播
本篇主要介绍神经网络的参数更新方法 在介绍参数更新方法之前,需要知道损失函数(loss function)。损失函数的作用是衡量模型预测值与实际值之间的差异。一般神经网络用的损失函数是:交叉熵损失(cross entropy)。当pi=1时,函数图像如下:x轴为qi,y轴为loss值(x轴的定义域一般在[0,1]之间)上面公式pi指模型的实际值,qi值的是通过神...
2019-01-05 12:19:19
3063
1
原创 全连接神经网络结构
这一系列博客,记录我在deep learning上的理解和认知。首先介绍神经网络的基本结构。如下图 基本的结构:输入层(样本数据),隐藏层(隐藏层的层数和每层的神经元数目需要自己给定),输出层(预测目标)神经元神经元的结构如下图所示神经元是上一层的输入与权重相乘后求和,在经过非线性函数转换。得到下一层的输出。如:之前网络结构图中,从输入层到隐藏层的神经元的数目为4个...
2019-01-01 14:12:12
15005
1
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人