NNDL 作业二

一、习题2-1

(1)为什么平方损失函数不适用于分类问题 :

       首先举个栗子,假如是一个四分类的问题,分为标签分别为“1”,“2”,“3”,“4”.假设真实标签为“1”,如果用平方损失函数的话,预测标签为“2”,“3”,“4”时,得到的平方损失函数的结果是不同的,而正常情况下都是分类错误,其衡量结果应该是相同的。

所以总结一下就是在分类错误时,不同的错误结果可能导致的损失函数不同。

(2)为什么交叉熵损失函数不适合回归问题:

通俗理解什么是交叉熵损失函数:

        想象一下,你有一个分类模型,它可以将输入的数据分为不同的类别。你希望这个模型能够准确地识别输入属于哪个类别,以便做出正确的预测。交叉熵损失就是一种衡量模型预测准确性的指标。

        具体来说,交叉熵损失通过对比模型给出的概率分布(例如,某个输入属于每个类别的概率)和实际标签的分布(通常采用“独热编码”,将真实标签表示为只有一个元素为1,其他元素都为0的向量),来计算两者之间的差异。

        如果模型的预测结果与实际标签非常接近,交叉熵损失将会较低,表示模型的性能良好。如果模型的预测结果与实际标签差距较大,交叉熵损失将会较高,表示模型的性能较差。

为什么交叉熵损失函数不适合回归问题:

       交叉熵损失函数是衡量分类模型输出的概率分布与实际标签之间的差异,而在回归问题中,我们关注的是预测值与实际值之间的数值差异
       在分类问题中,输出是一个概率分布,而交叉熵通过计算实际类别的概率与模型输出的概率之间的差异,来衡量模型的预测准确性。而在回归问题中,预测值是一个连续的实数,而不是一个概率分布。回归问题的目标是尽可能准确地预测一个连续的数值,而不是分类问题中的离散类别。

二、习题2-12

(1)、公式回顾

P_{c}=\frac{TP_{c}}{TP_{c}+FP_{c}}

R_{c}=\frac{TP_{c}}{TP_{c}+FN_{c}}

F_{c}=\frac{(1+\beta ^{2})*P_{c}*R{_{c}}}{\beta ^{2}*P_{c}+R_{c}}    \beta =1 时F的值称为F1值

宏平均:

P_{macro}=\frac{1}{C} \sum_{c=1}^{C}P_{c}

R_{macro}=\frac{1}{C} \sum_{c=1}^{C}R_{c}

F1_{macro}=\frac{2*P_{macro}*R{_{macro}}}{P_{macro}+R_{macro}}

微平均(由查阅资料得到):

(2)解题过程

把题中的数据可以归纳为:

      \hat{y}=1         \hat{y}=2     \hat{y}=3
 y=1           1            1          0
y=20            2          1
y=3            1            1           2

精确率:

P_{1}=\frac{1}{1+1}=\frac{1}{2}

P_{2}=\frac{2}{1+2+1}=\frac{1}{2}

P_{3}=\frac{2}{1+2}=\frac{2}{3}

召回率:

R_{1}=\frac{1}{1+1}=\frac{1}{2}

R_{2}=\frac{2}{1+2}=\frac{2}{3}

R_{3}=\frac{2}{1+1+2}=\frac{1}{2}

F1值:

F1_{1}=\frac{2*P_{1}*R_{1}}{P_{1}+R_{1}}=\frac{1}{2}

F1_{2}=\frac{2*P_{2}*R_{2}}{P_{2}+R_{2}}=\frac{4}{7}

F1_{3}=\frac{2*P_{3}*R_{3}}{P_{3}+R_{3}}=\frac{4}{7}

宏平均:

P_{macro}=\frac{1}{3}*(\frac{1}{2}+\frac{1}{2}+\frac{2}{3})=\frac{5}{9}

R_{macro}=\frac{1}{3}*(\frac{1}{2}+\frac{2}{3}+\frac{1}{2})=\frac{5}{9}

F1_{macro}=\frac{2*P_{macro}*R{_{macro}}}{P_{macro}+R_{macro}}=\frac{2*\frac{5}{9}*\frac{5}{9}}{\frac{5}{9}+\frac{5}{9}}=\frac{5}{9}

微平均·:

Pmicro=Rmicro=\frac{5}{4+5}=\frac{5}{9}

F1_{micro}=\frac{2*P_{micro}*R{_{micro}}}{P_{micro}+R_{micro}}=\frac{2*\frac{5}{9}*\frac{5}{9}}{\frac{5}{9}+\frac{5}{9}}=\frac{5}{9}

三:总结:

精确率,召回率,F1值针对每个类。

宏平均针对总体。

微平均针对每一个样本。

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值