liulina603的专栏

原创 深度学习: 学习率 (learning rate)

深度学习: 学习率 (learning rate)Introduction学习率 (learning rate)，控制 模型的 学习进度 ： lr 即 stride (步长) ，即反向传播算法中的 ηη ：ωn←ωn−η∂L∂ωnωn←ωn−η∂L∂ωn学习率大小  学习率 大 学习率 小 学习速度 快 慢 使用时间点 刚开始训练时 ...