自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(1)
  • 论坛 (1)

原创 Practical Recommendations for Gradient-Based Training of Deep Architectures

3 超参数 1)神经网络超参数 近似优化超参数:初始学习率,学习率策略超参数,mini-batch尺寸,训练迭代次数,动量β\beta,逐层优化超参数2)模型及训练准则超参数 隐含层节点数目nhn_h:选择尽可能大的隐含层节点使得训练早结束,所有层使用相同的隐含层数目不会比逐层选取的效果差。权值衰变归一化系数λ\lambda: 为防止溢出,为训练准则增加归一化项,L2归一化为训练准则增加λ∑

2016-06-14 17:39:07 1222

空空如也

cv_family_z的留言板

发表于 2020-01-02 最后回复 2020-01-02

空空如也
提示
确定要删除当前文章?
取消 删除