Torch 中的 Cross_Entropy 是和 softmax 绑定在一起的,以确保数值稳定性
防止overfitting
手动实现1范数的 Regularization
2范数 torch 已经封装在模型中了
动量法 Momentum
Learning rate decay 的两种方法
Batch Norm
Torch 中的 Cross_Entropy 是和 softmax 绑定在一起的,以确保数值稳定性
防止overfitting
手动实现1范数的 Regularization
2范数 torch 已经封装在模型中了
动量法 Momentum
Learning rate decay 的两种方法
Batch Norm