关于Scikit-learn机器学习的笔记——第四篇

本文介绍了在机器学习中数据预处理的重要性,特别是使用Scikit-learn库进行数据标准化。通过示例展示了如何使用`preprocessing.scale`函数对数据进行标准化,使得不同特征具有相同的尺度,从而提高模型如SVM的学习效果。实验结果显示,标准化后的数据在SVM模型上的得分更高,验证了预处理的有效性。
摘要由CSDN通过智能技术生成

视频教程:【莫烦Python】Scikit-learn (sklearn) 优雅地学会机器学习

在我们获得数据时,需要对数据进行normalization
在这里插入图片描述
x1的数据范围更大,x2的数据范围很小,以这样的数值这样进行机器学习会使得结果不准确,所以我们需要经过标准化,再去进行机器学习

程序示例:

from sklearn import preprocessing
import numpy as np

a=np.array([[10,2.7,3.6],
            [-100,5,-2],
            [120,20,40]],dtype=np.float64)##3个features分别是从-100到120,从2.7到20,从-2到40

print(a)##无scale的结果
print(preprocessing.scale(a)) ##有scale之后的结果

输出结果:

[[  10.     2.7    3.6]
 [-100.     5.    -2. ]
 [ 120.    20.    40. ]]
[[ 0.         -0.85170713 -0.55138018]
 [-1.22474487 -0.55187146 -0.852133  ]
 [ 1.22474487  1.40357859  1.40351318]]

很明显的看出来,经过scale的结果会更适合机器学习,因为他的偏差会更小

接下来我们生成一些随机值,用SVM模型寻找超平面
程序示例:

from sklearn import preprocessing
import numpy as np
from sklearn.model_selection import train_test_split##从sklearn数据库导入函数
from sklearn.datasets._samples_generator import make_classification
from sklearn.svm import SVC
import matplotlib.pyplot as plt

X,y=make_classification(n_samples=300,n_features=2,n_redundant=0,n_informative=2,random_state=22,n_clusters_per_class=1,scale=100)
plt.scatter(X[:,0],X[:,1],c=y)
plt.show()

输出结果:
在这里插入图片描述
接下来,我们利用SVM去学习,先不进行标准化数据
程序示例:

from sklearn import preprocessing
import numpy as np
from sklearn.model_selection import train_test_split##从sklearn数据库导入函数
from sklearn.datasets._samples_generator import make_classification
from sklearn.svm import SVC
import matplotlib.pyplot as plt

X,y=make_classification(n_samples=300,n_features=2,n_redundant=0,n_informative=2,random_state=22,n_clusters_per_class=1,scale=100)

X_train,X_test,y_train,y_test=train_test_split(X,y,test_size=.3)##X,y分为训练数据和测试数据,用traindata去学习,testdata去预测
clf=SVC()
clf.fit(X_train,y_train)##traindata放入模型去学习
print(clf.score(X_test,y_test))##用test去测试他的分数

输出结果:

0.9333333333333333

假如利经过标准化,那我们会得到什么样的结果
程序示范例:

from sklearn import preprocessing
import numpy as np
from sklearn.model_selection import train_test_split##从sklearn数据库导入函数
from sklearn.datasets._samples_generator import make_classification
from sklearn.svm import SVC
import matplotlib.pyplot as plt

X,y=make_classification(n_samples=300,n_features=2,n_redundant=0,n_informative=2,random_state=22,n_clusters_per_class=1,scale=100)

X=preprocessing.scale(X)##进行标准化数据
X_train,X_test,y_train,y_test=train_test_split(X,y,test_size=.3)##X,y分为训练数据和测试数据,用traindata去学习,testdata去预测
clf=SVC()
clf.fit(X_train,y_train)##traindata放入模型去学习
print(clf.score(X_test,y_test))##用test去测试他的分数

输出结果:

0.94444444444444

结果分数会高一点,这个分数会随着生成的数值的不同而变化

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Sol-itude

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值