u013222404的博客

【代码】FasionMINST图片识别。

损失函数，交叉熵作为损失函数，代替了MSE，在分类问题中被广泛应用。其离散形式为 H(y, \hat{y}) = -\sum_{i=1}^{n}y_i \log(\hat{y_i}) ，其中 y 为真实概率分布， \hat{y} 为预测概率分布， n 为分类任务的类别个数。感受野大小，卷积核大小，就是那个小方块的大小，通常为奇数正方形，比如3*3,5*5。感受野大小，卷积核大小，就是那个小方块的大小，通常为奇数正方形，比如3*3,5*5。计算模型的梯度，然后进行训练优化，相当于迭代过程中的自动优化。