贷款用户逾期问题Task4

贷款用户逾期问题Task4

任务4 - 模型评估(2天)

任务4:记录5个模型(逻辑回归、SVM、决策树、随机森林、XGBoost)关于accuracy、precision,recall和F1-score、auc值的评分表格,并画出ROC曲线。
时间:2天
可以参照以下格式:
图片: https://uploader.shimo.im/f/eapqFsVtmvIaqBDq.png

评估

from sklearn.metrics import accuracy_score, recall_score, f1_score, roc_auc_score, roc_curve
from matplotlib import pyplot as plt
# 定义评估函数
def model_metrics(clf, X_train, X_test, y_train, y_test):
    # 预测
    y_train_pred = clf.predict(X_train)
    y_test_pred = clf.predict(X_test)
    y_train_pred_proba = clf.predict_proba(X_train)[:, 1]
    y_test_pred_proba = clf.predict_proba(X_test)[:, 1]

    # 评估
    # 准确性
    print('准确性:')
    print('Train:{:.4f}'.format(accuracy_score(y_train, y_train_pred)))
    print('Test:{:.4f}'.format(accuracy_score(y_test, y_test_pred)))

    # 召回率
    print('召回率:')
    print('Train:{:.4f}'.format(recall_score(y_train, y_train_pred)))
    print('Test:{:.4f}'.format(recall_score(y_test, y_test_pred)))
    
    # f1_score
    print('f1_score:')
    print('Train:{:.4f}'.format(f1_score(y_train, y_train_pred)))
    print('Test:{:.4f}'.format(f1_score(y_test, y_test_pred)))
    
    # roc_auc
    print('roc_auc:')
    print('Train:{:.4f}'.format(roc_auc_score(y_train, y_train_pred_proba)))
    print('Test:{:.4f}'.format(roc_auc_score(y_test, y_test_pred_proba)))    
    
    # 描绘 ROC 曲线
    fpr_tr, tpr_tr, _ = roc_curve(y_train, y_train_pred_proba)
    fpr_te, tpr_te, _ = roc_curve(y_test, y_test_pred_proba)
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值