CNN处理图像的一点总结

结合寒老师的课,对CNN近几年的发展进行总结,主要分两部分进行,1.cnn基础模型的改进。2.图像处理框架的改进

1.基础模型改进。

针对CNN模型的主要难点其实分为两个方面,(1)深度网络,难以训练,使用随机梯度下降法在将误差往前传的过程中可能就变成0了,(2)网络初始值难以确定,没有一个合适的初始值,想要训练好一个网络几乎是不可能的。对于第一个问题,除了一些大团队大量的计算外,就是对RELU函数的优化,由此出现的Leaky ReLUMaxout等激活函数,而且发现Tanh在处理某些问题上来说,有较好的效果。对于第二个问题,深度现如今的爆发其实很大程度的源于AlexNet给与我们一个训练的参数初始值,使人们能够基于已有参数的基础上去进行

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值