深度学习之神经网络

这篇博客探讨了神经网络的基本结构,包括单层、两层和多层神经网络,以及卷积神经网络和循环神经网络。同时,详细介绍了神经网络的三种关键函数:激活函数,如Sigmoid、Tanh和ReLU;损失函数,如优化的目标;以及优化算法,如Adam。内容深入浅出,适合深度学习初学者。
摘要由CSDN通过智能技术生成

神经网络

神经网络由输入层、隐藏层、输出层组成

神经网络类别

1、单层神经网路(感知机):类似逻辑回归,线性分类,全连接
没有激活函数
2、两层神经网络(多层感知机):带一个隐层,非线性分类,全连接
3、多层神经网络(深度学习):全连接
4、卷积神经网络(CNN):非全连接
5、循环神经网络(RNN):处理序列数据

神经网络的三种函数

激活函数

作非线性变换

常用的激活函数

Sigmoid:输出0到1
在这里插入图片描述

Tanh:输出-1到1
在这里插入图片描述

Relu:小于0取0,大于0取本身
在这里插入图片描述

损失函数

是神经网络优化的目标函数,神经网络训练或者优化的

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值