- 博客(3)
- 收藏
- 关注
转载 激活函数相关资料
[1]. http://www.faqs.org/faqs/ai-faq/neural-nets/part2/section-10.html [2]. http://papers.nips.cc/paper/874-how-to-choose-an-activation-function.pdf [3]. https://en.wikipedia.org/wiki/Activation_funct...
2018-11-09 08:48:09 125
转载 cnn不变性讨论
大致结果就是cnn具有位移不变性,但是完全不具有旋转不变性; 或者说想要网络学习旋转不变性没有直接旋转扩充样本来的实际。 位移不变性到底是那个层起到的作用也存在不同的意见,有的认为是pool,有的认为是卷积或者FC。 https://blog.csdn.net/xiaojiajia007/article/details/78396319 https://blog.csdn.net/baid...
2018-11-03 13:50:28 1476
原创 cnn训练技巧1
cnn调参技巧记录,好的参数不光可以加速模型收敛,而且可以有效的避免很多错误。当然在很多简单任务中可能完全随机的模型初始参数,简单的一些建议学习率以及动量都可以得到一个比较满意的结果,比如单一,简单的降质模型下的图像生成,类别简单少量的一些分类任务等,不好的初始化参数是可以应对简单任务的。但是对于复杂任务就很难了,因为初始化参数选择的不好,导致结果十分不可控。因为不好的初始化参数导致结果很不可靠,...
2018-11-01 15:31:09 1268
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人