机器学习 模型评估方法(分类问题)

1、错误率和精度

错误率:

E(f,D) = \frac{1}{m}\sum_{i=1}^{m}\mathbb{I}(f(x_{i}\neq y_i))

精度:

acc(f;D) = 1-E(f;D)

2、查准率、查全率

例如在信息检索任务中:

(1)检索出的信息中有多少比例是用户感兴趣的   ==> 查准率 precision

(2)用户感兴趣的信息中有多少被检索出来          ==> 查全率 recall

按真实类别与预测类别分为:

真正例(True Precision)TP

假正例(False Precision)FP

真反例(True Negative)TN

假反例(False Negative)FN

真实情况 预测情况
正例 反例
正例 TP(真正例) FN(假反例)
反例 FP(假正例) TN(真反例)

查准率:预测为正中完成正确的/预测为正的

Precision=\frac{TP}{TP+FP}

查全率:预测为正中完全正确的/样本中所有为正的

recall = \frac{TP}{TP+FN}

一般来说,查准率高时,查全率往往偏低;查全率高时,查准率偏低。

<
  • 0
    点赞
  • 9
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值