数据挖掘学习笔记之人工神经网络(二)

本文介绍了多层神经网络与反向传播算法,强调了sigmoid函数在可微阈值单元中的作用,以及反向传播如何通过梯度下降最小化误差。反向传播算法在多层网络中寻找权值,以实现非线性决策面,通过隐藏层自动发现有用的中间表示。文章还探讨了增加冲量项以改进权重更新,帮助避免局部极小值。
摘要由CSDN通过智能技术生成

多层网络和反向传播算法

我们知道单个感知器仅能表示线性决策面。然而我们可以将许多的类似感知器的模型按照层次结构连接起来,这样就能表现出非线性决策的边界了,这也叫做多层感知器,重要的是怎么样学习多层感知器,这个问题有两个方面:

1、  要学习网络结构;

2、  要学习连接权值

对于一个给定的网络有一个相当简单的算法来决定权值,这个算法叫做反向传播算法。反向传播算法所学习的多层网络能够表示种类繁多的非线性曲面。

可微阈值函数

现在我们来学习一

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

文宇肃然

精神和物质鼓励你选一个吧

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值