scikit-learn 分类模型各种评估指标使用

import pandas as pd
from sklearn import metrics


# ModelEvolution
class ModelEvolution(object):
    def __init__(self):
        pass

    @staticmethod
    def report(test_y, score, pred_y):  # test_y 原始标签, score 模型输出概率值, pred_y 预测值
        if len(test_y) != len(score):
            print("The Lengths of test set and predicted set are not match!")
            exit(-1)

        measureNames, measureValues = [], []  # measureNames 评价指标的名称, measureValues 对应的值
        indicators = pd.DataFrame()

        accu = ModelEvolution.accuracy(test_y, score)
        measureNames.append("Accuracy:")
        measureValues.append(str(accu))

        prec = ModelEvolution.precision(test_y, score)
        measureNames.append('Precision:')
        measureValues.append(str(prec))

        reca = ModelEvolution.recall(test_y, score)
        measureNames.append('Recall:')
        measureValues.append(str(reca))

        f1 = ModelEvolution.F1(test_y, score)
        measureNames.append('F1:')
        measureValues.append(str(f1))

        ap = ModelEvolution.AP(test_y, pred_y)
        measureNames.append('AP:')
        measureValues.append(str(ap))

        auc = ModelEvolution.AUC(test_y, pred_y)
        measureNames.append('AUC:')
        measureValues.append(str(auc))

        cmat = ModelEvolution.CMatrix(test_y,score)
        measureNames.append('ConfusionMatrix:')
        measureValues.append(str(cmat))

        indicators['measureNames'] = measureNames
        indicators['measureValues'] = measureValues
        return indicators  # 返回评估值

    @staticmethod
    def accuracy(test_y, score):  # 准确率
        return metrics.accuracy_score(test_y, score)

    @staticmethod
    def precision(test_y, score):  # 精确率
        return metrics.precision_score(test_y, score, average=None)

    @staticmethod
    def recall(test_y, score):  # 召回率
        return metrics.recall_score(test_y, score, average=None)

    @staticmethod
    def F1(test_y, score):  # F1
        return metrics.f1_score(test_y, score, average=None)

    @staticmethod
    def AP(test_y, pred_y):  # 平均精确率
        return metrics.average_precision_score(test_y, pred_y)

    @staticmethod
    def AUC(test_y, pred_y):  # AUC
        return metrics.roc_auc_score(test_y, pred_y)

    @staticmethod
    def CMatrix(test_y, score):  # 混淆矩阵
        return metrics.confusion_matrix(test_y, score)


if __name__ == '__main__':
    pass
    # ModelEvolution.report()


未完成,稍后继续
声明: 总结学习,有问题或不当之处,可以批评指正哦,谢谢。

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值