机器学习-特征选择-随机森林

最新推荐文章于 2023-10-13 23:34:56 发布

Santorinisu

最新推荐文章于 2023-10-13 23:34:56 发布

阅读量1.1k

点赞数 2

分类专栏：机器学习文章标签：机器学习 python

Santorinisu博客，未经授权，禁止转载!!

本文链接：https://blog.csdn.net/Santorinisu/article/details/104423381

版权

本文通过随机森林算法展示了特征的重要性排序，并介绍了如何使用SelectFromModel进行特征选择。提供了相应的代码实现及运行结果。

摘要由CSDN通过智能技术生成

Section I： Code Bundle

第一部分：Feature Importance Sorted via Random Forest

代码：

import matplotlib.pyplot as plt
from sklearn import datasets
from sklearn.preprocessing import StandardScaler
from sklearn.model_selection import train_test_split
import numpy as np
from sklearn.ensemble import RandomForestClassifier

#Section 1: Prepare data
plt.rcParams['figure.dpi']=200
plt.rcParams['savefig.dpi']=200
font = {
   'family': 'Times New Roman',
        'weight': 'light'}
plt.rc("font", **font)

#Section 2: Load data and split it into train/test dataset
wine=datasets.load_wine()
X,y=wine.data,wine.target
X_train,X_test,y_train,y_test=train_test_split(X,y,test_size=0.3,random_state=1,stratify=y)

#Section 3: Select features via Random Forest
feat_labels=wine.feature_names
forest=RandomForestClassifier