python数据分析与应用课后实训_python数据分析与应用

本文通过实例介绍了如何使用sklearn进行数据处理和降维操作,包括使用MinMaxScaler和PCA对乳腺癌和波士顿房价数据进行预处理。此外,还探讨了聚类模型的构建与评估,如KMeans,并使用FMI、轮廓系数和Calinski-Harabasz指数评估了Iris数据集的聚类效果。
摘要由CSDN通过智能技术生成

python数据分析与应用笔记

7218761-d42f7c11dd54b94e.jpg

使用sklearn构建模型

1.使用sklearn转换器处理数据

import numpy as np

from sklearn.datasets import load_breast_cancer

from sklearn.preprocessing import MinMaxScaler #该函数时对数据做标准化处理

from sklearn.decomposition import PCA #该函数时对数据进行降维处理

from sklearn.model_selection import train_test_split #该函数是对数据做训练集和测试集的划分

cancer = load_breast_cancer() #将数据集赋值给cancer变量

cancer_data = cancer['data'] #提取数据集中的数据

cancer_target = cancer['target'] #提取数据集中的标签

cancer_names = cancer['feature_names'] #查看特征数目

cancer_desc = cancer['DESCR']

#划分训练集和测试集,其中20%的作为测试集

cancer_train_data,cancer_test_data,cancer_train_target,cancer_test_target = train_test_split(cancer_data,cancer_target,test_size = 0.2,random_state = 42)

scaler = MinMaxScaler().fit(cancer_train_data) #生成规则

# 将规则应用于训练集和测试集

cancer_trainScaler = scaler.transform(cancer_train_data)

cancer_testScaler = scaler.transform(cancer_test_data)

#构建pca降维模型

pca_model = PCA(n_components = 10).fit(cancer_trainScaler)

#将降维模型应用于标准化之后的训练数据和测试数据

cancer_trainPca = pca_model.transform(cancer_trainSc

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
好的,以下是第五章的课后实训题目及答案: 1. 编写一个Python程序,将某个Excel表格中的数据读取出来,并进行简单的数据处理,最后将处理后的数据重新写入到一个新的Excel表格中。 ```python import pandas as pd # 读取Excel表格中的数据 data = pd.read_excel('data.xlsx', sheet_name='Sheet1') # 进行简单的数据处理,例如将“性别”列中的“男”和“女”替换为1和0 data['性别'] = data['性别'].apply(lambda x: 1 if x == '男' else 0) # 将处理后的数据重新写入到一个新的Excel表格中 data.to_excel('processed_data.xlsx', sheet_name='Sheet1', index=False) ``` 2. 编写一个Python程序,读取某个CSV文件中的数据,并进行可视化分析,例如绘制折线图、柱状图、散点图等。 ```python import pandas as pd import matplotlib.pyplot as plt # 读取CSV文件中的数据 data = pd.read_csv('data.csv') # 绘制折线图 plt.plot(data['日期'], data['销售额']) plt.xlabel('日期') plt.ylabel('销售额') plt.title('销售额变化趋势图') plt.show() # 绘制柱状图 plt.bar(data['日期'], data['销售额']) plt.xlabel('日期') plt.ylabel('销售额') plt.title('销售额分布图') plt.show() # 绘制散点图 plt.scatter(data['广告费用'], data['销售额']) plt.xlabel('广告费用') plt.ylabel('销售额') plt.title('广告费用与销售额关系图') plt.show() ``` 3. 编写一个Python程序,读取某个文本文件中的数据,并进行文本分析,例如统计单词数量、分析词频等。 ```python import re # 读取文本文件中的数据 with open('data.txt', 'r') as f: text = f.read() # 统计单词数量 word_count = len(re.findall(r'\b\w+\b', text)) # 分析词频 word_list = re.findall(r'\b\w+\b', text) word_dict = {} for word in word_list: if word in word_dict: word_dict[word] += 1 else: word_dict[word] = 1 # 输出结果 print('单词数量:', word_count) print('词频统计:') for word, count in word_dict.items(): print(word, ':', count) ```

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值