![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
深度学习
文章平均质量分 54
差点就学不会了啊
这个作者很懒,什么都没留下…
展开
-
深度学习中的正则化技术--DropOut&DropConnect
上次的有L1,L2范数正则化,这次介绍 DropOut及其衍生出来的DropConnectL1,L2范数正则化与 DropOut正则化的原理有本质上的不同Drout的原理是dropout是在经过激活函数之后,再经过一个函数用于控制是否输出,不输出的概率是pdropout对于提升性能有很大提升,最主要的观点是从集成学习的角度解释的以天气预报为例,预测未来7天的天气,5个分类器同时...原创 2018-12-25 11:48:52 · 716 阅读 · 0 评论 -
二值网络:训练权重和激活值限制在+1或-1的神经网络
Binarized Neural Networks: Training Neural Networks with Weights and Activations Constrained to +1 or -1介绍这篇论文主要作了以下改进:1.引入一种训练二值神经网络的方法。在运行时,以及在训练的过程中计算参数梯度时,神经网络具有二值的权重和激活值。2.做了两套实验,每一套在不同的框架下完成...原创 2019-03-20 17:06:54 · 1383 阅读 · 0 评论