基于TensorFlow卷积神经网络实现手写数字识别
一.权重初始化为了创建这个模型,我们需要创建大量的权重和篇置项。这个模型中的权重在初始化时应该加入少量的噪声来打破对称性以及避免0梯度。由于我们使用的是Relu激活函数,因此比较好的做法是用一个较小的正数来初始化偏置项,以避免神经元节点输出恒为0的问题。为了不在建立模型的时候反复做初始化操作,我们定义两个函数用来初始化。def weight_variable(shape): initial = tf.truncated_normal(shape, stddev=0.1) return t
原创
2020-08-14 18:36:13 ·
940 阅读 ·
0 评论