ACC、AUC、auPR

1. test acc:

模型正确预测的样本占总样本的比例。

如果该样本中零值大概是73%的比例,test acc高而auc低说明模型没学到有用的信息,将所有样本都判断为0都有73%的正确率,更何况随机猜测(auc=0.5),因此准确率会稍高于73%

2. AUC:

ROC曲线下的面积,ROC曲线是真阳率(True Positive Rate, TPR)对假阳率(False Positive Rate, FPR)的图表表示。AUC越高,意味着模型对正负样本的区分能力越强(能把正样本找全)。

AUC为0.5通常意味着模型没有区分能力,等同于随机猜测,即模型在各种阈值下,将正样本识别为正的能力,与将负样本错误地识别为正的概率相同,公式就是TN*TP = FN*FP,即正确分类的能力与错误分类的能力相同。 左凸最好

AUC更侧重于模型在所有可能的分类阈值下的综合表现,而不是仅仅关注正样本或负样本。它提供了一个衡量模型区分两个类别的能力的整体指标。

3. auPR:

精确率-召回率曲线下的面积,关注于正样本的预测准确性。 精确率(Precision):TP/(TP+FP)是模型预测为正的样本中实际为正的比例。 召回率(Recall):即TP/(TP+FN),模型正确识别为正的样本占所有实际正样本的比例。右凸最好

auPR更加关注于正样本,它在正样本数量远少于负样本的情况下,能提供更有意义的性能衡量。当正样本非常重要时,auPR可能是一个更好的选择。

  • 10
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值