模型调参利器 gridSearchCV(网格搜索)

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
好的,我来给你介绍一下如何使用KNN算法建模,测试和评价得分,以及如何通过K折交叉验证和网格搜索进行模型改进和调参。 1. 建模、测试和评价得分 首先,我们需要将数据集分成训练集和测试集。然后,使用KNeighborsClassifier类定义一个KNN分类器对象,设置n_neighbors参数,将分类器应用于训练集数据,使用predict方法对测试集进行预测,最后使用score方法计算分类器的准确率得分。 ```python from sklearn.model_selection import train_test_split from sklearn.neighbors import KNeighborsClassifier from sklearn.metrics import accuracy_score from sklearn.datasets import load_iris # 加载鸢尾花数据集 iris = load_iris() # 将数据集分成训练集和测试集 X_train, X_test, y_train, y_test = train_test_split(iris.data, iris.target, test_size=0.2, random_state=42) # 定义一个KNN分类器对象 knn = KNeighborsClassifier(n_neighbors=3) # 对训练集数据进行拟合 knn.fit(X_train, y_train) # 对测试集进行预测 y_pred = knn.predict(X_test) # 计算分类器的准确率得分 score = accuracy_score(y_test, y_pred) print("KNN分类器的准确率得分为:{:.2f}%".format(score * 100)) ``` 2. K折交叉验证的模型改进和调参 K折交叉验证是一种评估模型泛化性能的方法,它可以避免模型对于特定训练集的过拟合。我们可以使用KFold类来实现K折交叉验证,然后使用GridSearchCV类进行网格搜索调参。具体来说,我们可以定义一个KNN分类器对象,将它传入GridSearchCV类中,然后设置待测试的参数范围,进行网格搜索,找到最佳超参数组合,并输出最佳得分和超参数组合。 ```python from sklearn.model_selection import KFold, GridSearchCV from sklearn.neighbors import KNeighborsClassifier from sklearn.datasets import load_iris # 加载鸢尾花数据集 iris = load_iris() # 定义一个KNN分类器对象 knn = KNeighborsClassifier() # 定义K折交叉验证器 kf = KFold(n_splits=5, shuffle=True, random_state=42) # 定义待测试的参数范围 param_grid = {'n_neighbors': [3, 5, 7, 9]} # 进行网格搜索,找到最佳超参数组合 grid_search = GridSearchCV(knn, param_grid=param_grid, cv=kf) grid_search.fit(iris.data, iris.target) # 输出最佳得分和超参数组合 print("最佳得分为:{:.2f}%".format(grid_search.best_score_ * 100)) print("最佳超参数组合为:{}".format(grid_search.best_params_)) ``` 通过K折交叉验证和网格搜索,我们可以找到最佳的超参数组合,从而使模型的准确率得分达到最优。 希望这个例子能够帮助你理解如何使用KNN算法建模、测试和评价得分,以及如何通过K折交叉验证和网格搜索进行模型改进和调参
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值