数据预处理技术
课程实验
chaRon522
QQ:849663509
展开
-
数据导入与预处理实验四---Pandas清洗数据
一、实验概述:【实验目的】掌握Pandas数据清理的方法;初步掌握Pandas的基本数据结构【实施环境】(使用的材料、设备、软件) Linux或Windows操作系统环境,MySql数据库,Python或其他高级语言,Pandas二、实验内容第1题 Pandas对流感数据的清洗【实验过程】读取1997-2016年的全国流感的数据,对读取的数据进行清洗,清除多余的数据,纠正不一致的数据。并将数据拼接为一个数据框。读入人口数据,按年份和地区对流感数据填充人口数;将清洗后的数据.原创 2020-10-22 15:15:34 · 1829 阅读 · 0 评论 -
数据导入与预处理实验三---excel与python和数据库的交互
一、实验概述: 【实验目的】掌握Excel数据清理的方法;初步掌握Python处理Excel的方法掌握Excel与数据库连接方法;【实施环境】(使用的材料、设备、软件) Linux或Windows操作系统环境,MySql数据库,Python或其他高级语言二、实验内容第1题 找出与指定学校同级别的学校,并统计与指定学校同级别的每个学校出现的次数【实验过程】收集数据及数据说明。数据随实验报告给出,文件名为selected_peers.csv。该文件给出了美国2012年与某个大学同.原创 2020-10-06 20:06:56 · 1248 阅读 · 1 评论 -
数据导入与预处理实验二---json格式文件转换
一、实验概述:【实验目的】初步掌握数据采集的方法;初步掌握利用爬虫爬取网络数据的方法掌握不同数据格式之间的转换方法;【实施环境】(使用的材料、设备、软件) Linux或Windows操作系统环境,MySql数据库,Python或其他高级语言二、实验内容第1题 爬取网络数据【实验要求】爬取酷狗音乐网站(https://www.kugou.com/)上榜单前500名的歌曲名称,演唱者,歌名和歌曲时长将爬取的数据以JSon格式文件保存。读取JSON格式任意数据,检验文件格式是.原创 2020-09-26 15:14:23 · 3338 阅读 · 0 评论 -
数据导入与预处理实验一---KETTLE数据处理
一、实验概述:【实验目的】了解和掌握数据库恢复,变换,数据统计与可视化的方法;掌握Json数据集的API下载方法,数据提取及导入其他数据结构的方法掌握不同数据格式之间的转换方法;【实施环境】(使用的材料、设备、软件) Linux或Windows操作系统环境,MySql数据库,Mysql workbench或Navicat。二、实验内容 第1题 安然(Enron)电子邮件数据集的恢复与查询【实验要求】安装MySql数据库以及客户端(mysql workbench或Navica.原创 2020-09-16 22:25:24 · 4222 阅读 · 0 评论 -
python实现mysql数据导出到excel
1.在excel界面下按ALT+F11打开VBA窗口,在工具-引用中启用脚本2.安装并配置MySQLODBCMySQLODBC地址:https://dev.mysql.com/downloads/connector/odbc/参考链接:https://www.cnblogs.com/shandongmiao/p/9820566.html原创 2020-09-15 23:04:42 · 1085 阅读 · 0 评论