深度学习(一)神经网络的历史(上)

最近在学习斯坦佛cs231深度学习的课程,做的一些笔记:

1957年Frank Rosenblatt发明了第一代感知器,首次实现所谓感知器算法;


1960 年Widrow和Hoff发明了Adaline/Madaline,首次尝试把线性层叠加整合为多层感知器网络;

1986年Rumelhart等人第一次提出了反向传递算法;


2006年Geoff.Hinton和Ruslan Salakhutdinov发表的一篇论文表明深度神经网络不仅可以训练可以高效训练,但还不是现在深度学习的样子,那是需要初始化即经过训练得到初始化权重;


2012年Geoff.Hinton实验室利用深度神经网路进行声学建模和语音识别,然后同年Geoff.Hinton和Alex Krizhevsky在同一实验室发表里程碑的论文,首次用卷积神经网络框架在ImageNet分类比赛上取得第一



参考资料:

本文图片来自CS231n: Convolutional Neural Networks for Visual Recognition(2017)

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值