使用Python画ROC曲线和PRC曲线

1.受试者工作特征曲线(Receiver operating characteristic curve,ROC)

ROC曲线是衡量二分类模型优劣的一种评价指标,以真阳性率(TPR)为纵坐标,假阳性率(FPR)为横坐标绘制的曲线。ROC曲线下面积在0到1之间,其中TPR和FPR的计算方法为:
在这里插入图片描述
其中TP和TN分别是真阳性、真阴性样本的数量,FP和FN分别是假阳性、假阴性样本的数量。

from sklearn.metrics import roc_curve,auc
FPR,TPR,threshold = roc_curve(test_y,model.predict(test_x),pos_label=1)  
#test_y为测试集标签,model为训练好的模型,可为传统的机器学习模型,也可为深度学习模型。
# AUC值计算
AUC = auc(FPR,TPR)
print(AUC)
# ROC曲线绘制
plt.figure(figsize=(6,6))
plt.title('ROC curves')
plt.xlabel('False Positive Rate')
plt.ylabel('True Positive Rate')
plt.xlim([-0.05,1.05])
plt.ylim([-0.05,1.05])
plt.plot(FPR,TPR,color='r',label=' (AUC={:.4f})'.format(AUC))
plt.plot([0, 1], [0, 1], color='m', linestyle='--')
plt.legend(loc='lower right')
# 保存图片(常用格式如下)
plt.savefig('ROC curves.jpg',dpi=300) 
plt.savefig('ROC curves.pdf',dpi=300) 
plt.savefig('ROC curves.png',dpi=300) 
plt.show()

结果如下所示:
在这里插入图片描述

2.精确召回曲线(Precision recall curve,PRC)

PRC曲线被用于刻画二分类模型的分辨能力,进而比较不同二分类模型之间的差异。横坐标为查准率(Precision),纵坐标为召回率(Recall),可以反映二者此消彼长的关系。

from sklearn.metrics import precision_recall_curve,average_precision_score
# precision, recall值的计算
precision, recall, _ = precision_recall_curve(test_y,model.predict(test_x))
# average_precision值的计算
PRC = average_precision_score(test_y,model.predict(test_x))
print(PRC)
# PRC曲线绘制
plt.figure(figsize=(6,6))
plt.title('PR curves')
plt.xlabel('Recall')
plt.ylabel('Precision')
plt.xlim([-0.05,1.05])
plt.ylim([-0.05,1.05])
plt.step(recall, precision, color='b', label=' (PRC={:.4f})'.format(PRC))
plt.plot([0, 1], [1, 0], color='m', linestyle='--')
plt.legend(loc='lower right')
# 保存图片(常用格式如下)
plt.savefig('PR curves.jpg',dpi=300) 
plt.savefig('PR curves.pdf',dpi=300) 
plt.savefig('PR curves.png',dpi=300) 
plt.show()

结果如下所示:
在这里插入图片描述

  • 3
    点赞
  • 45
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
ROC曲线和AUC值是描述二元分类模型性能的重要指标。Python作为一种高效的编程语言,提供了很多ROC曲线和计算AUC值的工具。 要ROC曲线,需要先得到模型的预测概率分数和真实标签。然后,可以使用sklearn.metrics包中的roc_curve和auc函数进行计算和绘图。具体步骤如下: 1. 从模型中得到预测概率分数和真实标签(0或1)。 2. 使用roc_curve函数计算出不同阈值下的真正率(True Positive Rate)和假正率(False Positive Rate)。 3. 使用plt.plot函数ROC曲线,并使用plt.show函数显示结果。 4. 使用auc函数计算AUC值。 示例代码如下: ``` from sklearn.metrics import roc_curve, auc import matplotlib.pyplot as plt # 获取预测概率分数和真实标签 y_pred = model.predict_proba(X_test)[:,1] fpr, tpr, thresholds = roc_curve(y_test, y_pred) # ROC曲线 plt.plot(fpr, tpr, label='ROC curve (area = %0.2f)' % auc(fpr, tpr)) plt.plot([0, 1], [0, 1], 'k--') plt.xlim([0.0, 1.0]) plt.ylim([0.0, 1.05]) plt.xlabel('False Positive Rate') plt.ylabel('True Positive Rate') plt.title('Receiver operating characteristic') plt.legend(loc="lower right") plt.show() # 计算AUC值 auc_value = auc(fpr, tpr) print('AUC value is: %.2f' % auc_value) ``` 在这个示例中,我们使用model.predict_proba函数获取模型的预测概率分数,X_test为测试数据,y_test为测试数据的真实标签。我们使用roc_curve函数计算出不同阈值下的真正率和假正率,并使用plt.plot函数ROC曲线。我们使用auc函数计算ROC曲线下的面积即AUC值,并输出AUC值。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值