- 博客(3)
- 收藏
- 关注
原创 图像预处理:去均值、归一化、PCA、白化
为什么要进行图像预处理?大概是为了 (1)使得原始图像符合某种既定规则,便于后续处理。 (2)去除图像中的影响后续处理精度、准确度的因素,如噪声等。 (3)在正式处理前进行处理,减少后续的运算量,加速收敛(为什么会提高收敛速度,可以参见这篇博文图像数据预处理对收敛速度的影响),提高后续步骤的可靠性。 大概分为去均值、归一化、PCA、白化几种。假定数据表示成矩阵为X,其中我们假定X是[N...
2018-08-15 18:53:39 16225 3
原创 神经网络中偏置的作用
偏置值允许将激活函数向左或向右移位,这可能是成功学习的关键。 下面用示例讲解: 假设一个只有一个输入,一个输出的神经元(对,没有偏置), 神经元的输出就是sigmoid(w0*x),下图是w0取不同值时的结果图, 改变w0的值就是改变sigmoid函数的陡峭程度,如果想让x=2时,输出值为0,只改变wo的不同取值是无济于事的,你需要把曲线往右移动。我们加入偏置,如下图: 此时...
2018-08-15 16:09:16 26279 2
原创 反向传播算法的数学理解实例
神经网络的训练分为前馈和反向两部分,前馈是指在给定权重和神经单元的数值时,计算出下一层神经单元的数值以及其对应在激活函数下的输出指。如下图中红框部分: h1结点值neth1由i1、i2和b1决定,其输出值outh1是neth1在sigmoid函数作用下的值,同理可得到outh2, o1的结点值由outh1、outh2和b2决定,其输出值也是在sigmoid函数作用下的值,同理可得到outo...
2018-08-15 11:05:04 2780
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人