softmax、以及与sigmoid的比较
softmax是什么?softmax用于多分类过程中,将多个神经元的输出,映射到(0,1)范围内,且这些映射值的总和为1,相当于概率值。假设某神经网络输出层,共有个元素,其中第i个元素值为,则该元素对应的softmax值为:softmax与sigmoid的区别:sigmoid函数会分别处理各个原始输出值,因此其结果相互独立,概率总和不一定为1softmax函数的输出值相互关联,其概率的总和始终为1,因此,在softmax函数中,为增大某一类别的概率,其他类别的概率必须相应减少所以
原创
2021-10-12 20:33:55 ·
575 阅读 ·
0 评论