Object classification论文中训练策略
一、AlexNet
1、超参设定
batchsize=128 (图像大小224 * 224)
momentum=0.9
weight decay=0.0005 权重衰减对于模型学习很重要。
初始learning rate=0.01
优化方法:带动量的随机梯度下降
2、初始化
每一层的权重使用0均值,0.01标准差的正态分布初始化。
第二、四、五层的卷积层以及FC层的偏置...
原创
2018-04-18 11:19:35 ·
375 阅读 ·
0 评论