分类的评判标准

分类方法常用的评判标准

• TP(真阳性):正样本被正确预测为正样本,例子中的60
• FP(假阳性):负样本被错误预测为正样本,例子中的10
• TN(真阴性):负样本被正确预测为负样本,例子中的25
• FN(假阴性):正样本被错误预测为负样本,例子中的5

评价方法介绍

最终的计算公式

1.Precision(精确率)

关注预测为正样本的数据(可能包含负样本)中,真实正样本的比例
计算公式

2.Recall(召回率)

关注真实正样本的数据(不包含任何负样本)中,正确预测的比例
计算公式

3.F-score中β值的介绍

β是用来平衡Precision,Recall在F-score计算中的权重,取值情况有以下三种:

• 如果取1,表示Precision与Recall一样重要
• 如果取小于1,表示Precision比Recall重要
• 如果取大于1,表示Recall比Precision重要

一般情况下,β取1，认为两个指标一样重要.此时F-score的计算公式为:

其他考虑

预测模型无非就是两个结果

• 准确预测(不管是正样子预测为正样本,还是负样本预测为负样本)
• 错误预测

那我就可以直接按照下面的公式求预测准确率,用这个值来评估模型准确率不就行了

那为什么还要那么复杂算各种值.理由是一般而言:负样本远大于正样本。

可以想象,两个模型的TN变化不大的情况下,但是TP在两个模型上有不同的值,TN>>TP是不是可以推断出:两个模型的(TN+TP)近似相等.这不就意味着两个模型按照以上公式计算的Accuracy近似相等了.那用这个指标有什么用!!!

所以说,对于这种情况的二分类问题,一般使用Fscore去评估模型.

需要注意的是:Fscore只用来评估二分类的模型,Accuracy没有这限制

名词解释

(1)准确率就是找得对，召回率就是找得全。
(2)大概就是你问问一个模型，这堆东西是不是某个类的时候，

• 准确率就是，它说是，这东西就确实是的概率
• 召回率就是，它说是，但它漏说了（1-召回率）这么多。

(3)准确率和召回率是互相影响的，理想情况下肯定是做到两者都高，但是一般情况下准确率高、召回率就低，召回率低、准确率高，当然如果两者都低，那是什么地方出问题了。
(4)如果是做搜索，那就是保证召回的情况下提升准确率；如果做疾病监测、反垃圾，则是保准确率的条件下，提升召回。所以，在两者都要求高的情况下，可以用F1来衡量。