![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
神经网络
sssaltyfish
这个作者很懒,什么都没留下…
展开
-
Group Sparse Regularization for Deep Neural Networks:深度神经网络的组稀疏正则化 (翻译)
深度神经网络的组稀疏正则化 (翻译)Group Sparse Regularization for Deep Neural NetworksScardapane S, Comminiello D, Hussain A, et al摘要:在本论文中,我们考虑同时进行以下优化任务:深度神经网络的权重、隐层神经元的数量以及输入特征选择。虽然这三个问题通常被分开处理,但我们提出了一个简单的正则化公...翻译 2018-11-29 17:36:26 · 9477 阅读 · 8 评论 -
pytorch框架自定义正则项
利用pytorch框架构建神经网络时,可以使用框架中各优化方法中自带的“weight_decay”使用权重衰减,即L2范数正则项,例如:torch.optim.Adam(net.parameters(), weight_decay=0.1)但是当我们想使用自定义正则项,例如L1正则项的时候,可以使用如下方法:https://stackoverflow.com/a/50100180/9640...原创 2019-06-20 19:32:21 · 2732 阅读 · 2 评论