利用scikitlearn画ROC曲线

一个完整的数据挖掘模型,最后都要进行模型评估,对于二分类来说,AUCROC这两个指标用到最多,所以 利用sklearn里面相应的函数进行模块搭建。

具体实现的代码可以参照下面博友的代码,评估svm的分类指标。注意里面的一些细节需要注意,一个是调用roc_curve 方法时,指明目标标签,否则会报错。具体是这个参数的设置pos_label ,以前在unionbigdata实习时学到的。

重点是以下的代码需要根据实际改写:

    mean_tpr = 0.0  
    mean_fpr = np.linspace(0, 1, 100)  
    all_tpr = []
    
    y_target = np.r_[train_y,test_y]
    cv = StratifiedKFold(y_target, n_folds=6)

        #画ROC曲线和计算AUC
        fpr, tpr, thresholds = roc_curve(test_y, predict,pos_label = 2)##指定正例标签,pos_label = ###########在数之联的时候学到的,要制定正例
        
        mean_tpr += interp(mean_fpr, fpr, tpr)          #对mean_tpr在mean_fpr处进行插值,通过scipy包调用interp()函数  
        mean_tpr[0] = 0.0                               #初始处为0  
        roc_auc = auc(fpr, tpr)  
        #画图,只需要plt.plot(fpr,tpr),变量roc_auc只是记录auc的值,通过auc()函数能计算出来  
        plt.plot(fpr, tpr, lw=1, label='ROC  %s (area = %0.3f)' % (classifier, roc_auc)) 


然后是博友的参考代码:

[python]  view plain   copy
  在CODE上查看代码片 派生到我的代码片
  1. # -*- coding: utf-8 -*-  
  2. """ 
  3. Created on Sun Apr 19 08:57:13 2015 
  4.  
  5. @author: shifeng 
  6. """  
  7. print(__doc__)  
  8.   
  9. import numpy as np  
  10. from scipy import interp  
### 回答1: 利用PythonROC曲线和计算AUC值,可以使用scikit-learn库中的roc_curve和auc函数。roc_curve函数可以计算出ROC曲线上的每个点,而auc函数则可以计算出ROC曲线下的面积,即AUC值。具体代码可以参考以下示例: ```python from sklearn.metrics import roc_curve, auc import matplotlib.pyplot as plt # 假设y_true和y_score分别是真实标签和预测得分,类型为numpy数组 fpr, tpr, thresholds = roc_curve(y_true, y_score) roc_auc = auc(fpr, tpr) # 绘制ROC曲线 plt.plot(fpr, tpr, color='darkorange', lw=2, label='ROC curve (area = %0.2f)' % roc_auc) plt.plot([0, 1], [0, 1], color='navy', lw=2, linestyle='--') plt.xlim([0.0, 1.0]) plt.ylim([0.0, 1.05]) plt.xlabel('False Positive Rate') plt.ylabel('True Positive Rate') plt.title('Receiver operating characteristic') plt.legend(loc="lower right") plt.show() ``` 其中,y_true和y_score可以是任何类型的数组,只要y_true中的每个元素都是0或1,y_score中的每个元素都是[0, 1]之间的概率值即可。 ### 回答2: ROC曲线和AUC值是机器学习中常用的性能指标,用于检验分类器的准确率。Python中提供了多种方法来ROC曲线和计算AUC值。 ROC曲线包含了一系列的假正例率(FPR)和真正例率(TPR)的点,这些点对应了不同的分类器阈值。在Python中,可以利用Scikit-learn库提供的roc_curve函数来计算FPR和TPR,并使用Matplotlib库绘制ROC曲线。 以下是代码示例: ```python from sklearn.metrics import roc_curve, auc import matplotlib.pyplot as plt # 假设classifier是我们需要评估的分类器,X_test和y_test是测试数据及其标签 # 首先计算FPR和TPR probas_ = classifier.predict_proba(X_test) fpr, tpr, _ = roc_curve(y_test, probas_[:, 1]) # 计算AUC值 roc_auc = auc(fpr, tpr) # 绘制ROC曲线 plt.figure() lw = 2 plt.plot(fpr, tpr, color='darkorange', lw=lw, label='ROC curve (area = %0.2f)' % roc_auc) plt.plot([0, 1], [0, 1], color='navy', lw=lw, linestyle='--') plt.xlim([0.0, 1.0]) plt.ylim([0.0, 1.05]) plt.xlabel('False Positive Rate') plt.ylabel('True Positive Rate') plt.title('Receiver operating characteristic example') plt.legend(loc="lower right") plt.show() ``` 代码中,首先使用分类器预测测试数据的概率,并通过roc_curve函数计算FPR和TPR。然后使用auc函数计算AUC值,最后使用Matplotlib库ROC曲线。 这是利用Python计算ROC曲线和AUC值的基本过程,需要注意的是,ROC曲线和AUC值并不能完美地评估分类器的性能,它们只是其中的一种评判标准,分类器的真实优劣还需要综合其他指标来评估。 ### 回答3: ROC(Receiver Operating Characteristic)曲线是一种用于评估分类器性能的图形工具。该曲线描绘了在分类器不同阈值下真阳性率(TPR)与假阳性率(FPR)的关系。AUC(Area Under Curve)是ROC曲线下的面积,是ROC曲线优劣的量化指标。在分类器区分能力强时,ROC曲线距离对角线较远,AUC值大,分类器的性能越好。 利用python来ROC曲线和计算AUC值需要用到sklearn和matplotlib两个模块。首先需要准备好真实类别标签和分类器预测概率值的数据。使用sklearn.metrics中的roc_curve函数可以获得TPR和FPR的数据,使用matplotlib的pyplot可以将这些数据绘制成ROC曲线。最后使用sklearn.metrics中的roc_auc_score函数可以计算AUC值。 具体实现如下: ``` python from sklearn.metrics import roc_curve, roc_auc_score import matplotlib.pyplot as plt # 准备好真实类别标签和分类器预测概率值的数据true_labels和pred_probs # 计算ROC曲线的TPR和FPR数据 fpr, tpr, thresholds = roc_curve(true_labels, pred_probs) # 绘制ROC曲线 plt.plot(fpr, tpr, label='ROC curve') plt.plot([0, 1], [0, 1], 'k--', label='Random guess') plt.xlabel('False Positive Rate') plt.ylabel('True Positive Rate') plt.title('ROC curve') plt.legend() # 计算AUC值并输出 auc_value = roc_auc_score(true_labels, pred_probs) print('AUC value:', auc_value) ``` 另外,需要注意的是,当分类器预测概率值为0或1时,roc_curve函数会将这些数据点忽略不计。因此,在计算AUC值时,标签中不应该只包含0和1,最好加上一些其他概率值的样本,以充分显示分类器的性能。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值