神经网络与深度学习(一)

本文介绍了神经网络的基础,包括人工神经网络的原理和深度学习的概念。深度学习通过多层神经网络实现特征学习,解决线性分类问题。线性回归与线性分类的区别在于输出意义和参数意义的不同。此外,文章讨论了单神经元模型、感知机模型,并重点讲述了多层感知机如何解决线性不可分问题,以及BP算法在多层前馈网络中的应用。最后,探讨了性能优化方法,如动量法和自适应梯度算法(AdaGrad、RMSProp、Adam)。
摘要由CSDN通过智能技术生成

 0 基础

人工神经网络 (ANN): 是从微观结构与功能上模拟人脑神经系统而建立的一类 模型,是模拟人的智能的一条途径 信息处理由人工神经元间的相互作用来实现,由联接权 来传递,具有学习能力、自适应性、联接强度的可变性。

 图1-1 人脑神经元结构示意图

深度学习: 多隐层的人工神经网络具有优异的特征学习能力,学习得到的特征对数据有 更本质的刻画,从而有利于可视化或分类。深度神经网络在训练上的难度,可以通过“逐层初始化”来有效克服,逐层初始化可通过无监督学习实现。

1 线性分类

线性回归问题:利用数理统计中回归分析,来确定两种或两种以上变量间相互依赖的定量关系的一种统计分析方法

线性回归要素

  1. 训练集(training set)或者训练数据(training data), 是我们流程中的输入数据,一般称为x
  2. 输出数据y。
  3. 拟合的函数(或者称为假设或者模型)。
  4. 训练数据的条目数。

<

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值