深度学习
文章平均质量分 90
A-C-K
这个作者很懒,什么都没留下…
展开
-
CNN之优化卷积操作—变形卷积核、可分离卷积
从2012年的AlexNet发展至今,科学家们发明出各种各样的CNN模型,一个比一个深,一个比一个准确,一个比一个轻量。下面会对近几年一些具有变革性的工作进行简单盘点,从这些充满革新性的工作中探讨日后的CNN变革方向。一、卷积只能在同一组进行吗?-- Group convolutionGroup convolution 分组卷积,最早在AlexNet中出现,由于当时的硬件资源有限,训练Al...转载 2018-08-12 20:48:41 · 14629 阅读 · 2 评论 -
激活函数之深入解读
导读:什么是激活函数? 在神经网络中,对于图像,我们主要采用了卷积的方式来处理,也就是对每个像素点赋予一个权值,这个操作显然就是线性的。但是对于我们的样本来说,不一定是线性可分的,为了解决这个问题,我们可以进行线性变化,或者我们引入非线性因素,解决线性模型所不能解决的问题。 这就是为什么要有激活函数:激活函数是用来加入非线性因素的,因为线性模型的表达力不够 所以激活函数,并...原创 2018-09-12 18:51:49 · 3443 阅读 · 4 评论