数据挖掘小组学习:模型构建与模型评估

该博客介绍了在一个数据挖掘小组学习中,使用逻辑回归、SVM、决策树、随机森林和XGBoost构建模型的过程。通过准确率等评分方式对模型进行初步评估,发现随机森林(RF)存在明显的过拟合问题,而XGBoost的拟合程度也较为严重。
摘要由CSDN通过智能技术生成

3. 模型构建

3.1 任务

用逻辑回归、svm和决策树;随机森林和XGBoost进行模型构建,评分方式任意,如准确率等。(不需要考虑模型调参)

3.2 代码

导入逻辑回归、svm、决策树、随机森林和XGBoost等模型:

from sklearn.linear_model import LogisticRegression
from sklearn.svm import SVC
from sklearn.tree import DecisionTreeClassifier
from sklearn.ensemble import RandomForestClassifier
from xgboost import XGBClassifier

from sklearn.model_selection import cross_val_score

# 测试集数据归一化
scaler.fit(x_test[numerics_features].values)

导入评分指标:

from sklearn.metrics import precision_score
from sklearn.metrics import roc_curve
from sklearn.metrics import recall_score
from sklearn.metrics import f1_score
from sklearn.metrics import roc_auc_score
from sklearn.metrics import accuracy_score

模型构建:

import warnings
warnings.filterwarnings("ignore")

LR = LogisticRegression
  • 0
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值