努力学挖掘机的李某某的博客

原创 【机器学习】——为什么softmax搭配cross entropy是解决分类问题的通用方案？

众所周知，softmax+cross entropy是在线性模型、神经网络等模型中解决分类问题的通用方案，但是为什么选择这种方案呢？它相对于其他方案有什么优势？笔者一直也困惑不解，最近浏览了一些资料，有一些小小心得，希望大家指正~ 损失函数：交叉熵Cross Entropy 我们可以从三个角度来理解cross entropy的物理意义 从实例上直观理解 我们首先来看Cross Entropy 的公...