Pandas 批量提取Excel文件，分析并可视化显示

最新推荐文章于 2022-12-19 09:37:14 发布
最新推荐文章于 2022-12-19 09:37:14 发布
阅读量5.4k 收藏 56
点赞数 4
分类专栏： Python Pandas学习 文章标签： Python 批量处理 Pandas 可视化
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43390547/article/details/83717830
版权
本文介绍如何利用Python的Pandas库批量读取Excel文件，合并数据，进行分组处理，并通过可视化展示结果。首先导入Numpy, Matplotlib, Pandas和OS模块，接着批量获取并合并Excel数据，再对数据进行分组计算平均值，最后使用可视化工具展示分析结果。" 79789073,7446096,BZOJ4916神犇和蒟蒻：数论问题解析,"['算法', '数论', '递推', '竞赛编程', '欧拉函数']
摘要由CSDN通过智能技术生成

Topic

本文主要是使用Pandas批量处理Excel文件，使用read_excel函数获取指定列的数据，然后使用concat功能把所有文件合并，合并完成的数据使用groupby函数按两个Key分组求取平均值，最后可视化画图；

1. 导入使用到的模块 Numpy,Matplotlib,Pandas OS

# -*- coding:UTF-8 -*-
import numpy as np
import matplotlib.pyplot as plt
import pandas as pd
import os

2. 批量获取Excel文件，并把需要的数据合并

#获取指定文件夹下所有Excel文件名称并传送给List1
List1 = os.listdir('c:\\Users\\Zstrong\\Desktop\\')
#定义DataFrame变量用来存放获取的所有数据
Res
最低0.47元/天 解锁文章
首撕包菜
关注
专栏目录
# 利用pandas库读取文件并使用matplotlib进行可视化
NUC__xjx的博客
04-04 4743
代码如下：（含部分代码） import numpy as np import pandas as pd import matplotlib.pyplot as plt from datetime import datetime from pandas.plotting import register_matplotlib_converters register_matplotlib_convert...
批量提取EXCEL文件中的数据
11-20
平时工作中遇到很多用相同的EXCEL模板格式报上来的数据，但汇总时遇到了问题。因此编写了这个应用程序。安装后即可使用。 原本有个完整的安装包的，但因上传权限不够只能将应用程序安装包上传这里。程序需要DOT net3.5支持，共有几百M，上传不了，请大家自己在网上下载安装，完后再装应用程序。 程序支持：自定义单元格提取，自定义行提取，自定义列提取，解决了按同一类EXCEL模板上传来的报表分析问题，很实用。本来有一运行界面的，但没地方上传只好作罢。
pandas 读取excel文件对数据简单清洗并用matplotlib 将数据展示
T525174893的博客
03-14 460
首先我们看下数据 接下来数据分析操作 import numpy as np import pandas as pd from matplotlib import pyplot as plt if __name__ == "__main__": #读取数据 df = pd.read_excel('tips.xlsx','sheet1')...
pandas模仿excel对数据处理并可视化
w_xjlxm的博客
11-15 735
import pandsa as pd def filterdata(): df = pd.read_csv('C:/Users/Desktop/data.csv',encoding='ISO-8859-1') #也可以用df = pd.read_csv('C:/Users/Desktop/data.csv',encoding='ISO-8859-1',index_col='CUT_ST...
Python可视化数据分析08、Pandas_Excel文件读写
红目香薰
07-27 1479
💝博客【红目香薰的博客_CSDN博客-计算机理论,2022年蓝桥杯,MySQL领域博主】💝✍本文由在下【红目香薰】原创，首发于CSDN✍🤗2022年最大愿望【服务百万技术人次】🤗💝Python初始环境地址【Python可视化数据分析01、python环境搭建】💝使用Pandas读写Excel文件，需要安装openpyxl、xlsxwriter及xlrd这3个第三方库。openpyxlopenpyxl源于PHPExcel，它提供了针对.xlsx文件的读写功能xlsxwriter。...
python期末作业：批量爬取站长之家的网站排行榜数据并保存，数据分析可视化
最新发布
05-24
在这个Python期末作业中，学生将面临一个综合性的挑战，即使用Python进行批量爬取、数据处理、分析以及可视化。这个项目涵盖了多个IT领域的关键知识点，包括网络爬虫技术、数据分析和数据可视化。以下是对这些核心...
Python批量提取Excel文件中所有单元格批注
Python小屋
06-29 2047
推荐图书：《Python程序设计（第3版）》，（ISBN：978-7-302-55083-9），清华大学出版社，2020年6月第1次印刷京东购买链接：https://item.jd.co...
Python实现批量读取txt文件并转换为excel的方法示例.zip
06-02
这种转换有助于数据分析、数据清洗和可视化。在这个示例中，我们将探讨如何使用Python来批量读取TXT文件并将其内容写入Excel工作簿。 首先，我们需要导入必要的库。`pandas`是用于数据操作的强大库，可以轻松地创建...
发票信息提取并生成Excel文件
09-24
在Excel中，我们可以创建工作表，设置格式，添加计算公式，以及利用图表进行可视化分析。 5. **自动化流程**：为了批量处理大量发票，可以构建自动化流程。例如，使用Python的OpenCV库读取扫描图片，调用OCR服务，...
Python-pandas批量读写操作Excel
qq_41202277的博客
11-07 3094
这里写自定义目录标题欢迎使用Markdown编辑器新的改变功能快捷键合理的创建标题，有助于目录的生成如何改变文本的样式插入链接与图片如何插入一段漂亮的代码片生成一个适合你的列表创建一个表格设定内容居中、居左、居右SmartyPants创建一个自定义列表如何创建一个注脚注释也是必不可少的KaTeX数学公式新的甘特图功能，丰富你的文章UML 图表FLowchart流程图导出与导入导出导入 欢迎使用Markdown编辑器 你好！ 这是你第一次使用 Markdown编辑器 所展示的欢迎页。如果你想学习如何使用Mar
matplotlib对excel数据可视化
qq_40298768的博客
09-12 7090
数据可视化 对excel文件中的数据进行分析和可视化 1.数据的获取 ​ 从https://datacatalog.worldbank.org/dataset/gender-statistics网站下载数据集，从中找到中国的数据，保存在china.xlsx文件中。 数据包含人口信息，个年龄段人口占比，男女比例，GDP等数据，如下图： 2.可视化展示 ​ 导入相关库，完成初始化 import matplotlib.pyplot as plt import pandas as pd import numpy
Python办公自动化实践1：从多个excel表中提取数据并汇总到一个工作表页中,表格,抽取,sheet
weixin_45714490的博客
10-04 1万+
Python办公自动化实践1：从多个excel表中提取数据并汇总到一个工作表页中,表格,抽取,sheet 发表时间：2020-04-26 问题：从当前目录或子目录中查询符合条件的excel表格，并从这些excel表格中抽取符合条件的行汇总到1个excel的sheet页中。 所有excel表格名字为：交付清单1、交付清单2，交付清单3……，格式也一样，样式如下：将类似多个excle表中，抽取序号中的N行（上图是1~4行）汇总到指定excel的sheet页中。 该表格在DataFrame中的显示方式如下：.
一款开源的强横数据可视化分析工具，支持对excel文件进行转换分析
代码讲故事
12-19 516
Pandasgui是一个开源的python模块，它为pandas创建了一个GUI界面，我们可以在其中使用pandas的功能分析数据和使用不同的功能，以便可视化和分析数据，并执行探索性数据分析。
Python数据分析数据可视化-----最好用的Pandas文件读取方法（持续更新中）
duohuanxi的博客
04-12 1051
迟到的更新又来了~ 这篇博客写一下Pandas读取txt文件，excel文件和csv文件的方法 （1）读取txt文件 import os os.chdir('C:/Users/XXX/Desktop/')#加载工作路径 data1 = pd.read_table('data1.txt', delimiter=',',header = 0, index_col=1) print(data1) 读...
读取excel文件并使用matplotlib绘图（含柱状图、柱状图加数值的显示和直方图）
非晚非晚的博客
04-14 1万+
首先推荐matplotlib官网的各种显示代码实例：<https://matplotlib.org/stable/gallery/index.html>其次推荐matplotlib官网教程：<https://matplotlib.org/stable/users/index.html>xlrd官网api：<https://xlrd.readthedocs.io/en/latest/api.html>
利用matplotlib对数据提取分析、可视化
m0_59292545的博客
07-22 1161
项目描述1、主要使用Matplotlib库（python）和echarts实现数据的提取，以及数据分析2、利用不同的图表来显示数据分析结果（可视化）
使用Python的pandas库操作Excel
热门推荐
cnds123的专栏
06-25 2万+
最近因需要用Excel电子表格处理数据，使用了其它一些方式处理Excel文件数据，这是学习笔记的整理。Python中有很多库可以操作Excel，像xlsxwriter、openpyxl、pandas、xlwings等。本文主要介绍pandas。
【Python自动化Excel】pandas处理Excel的拆分、合并
kingwsq的专栏
03-31 7979
话说Excel数据表，分久必合、合久必分。Excel数据表的“分”与“合”是日常办公中常见的操作。手动操作并不困难，但数据量大了之后，重复性操作往往会令人崩溃。利用Python的Pandas库，便可以自动实现Excel数据表的“分分合合”。下面结合实例来分享本人整理的实用代码片段。
pandas读取excel文件并可视化
06-28
### 回答1： Pandas是Python中一个非常流行的数据处理库，可以用来读取和处理Excel文件。可以使用pandas读取Excel文件，并使用matplotlib或seaborn等库进行可视化。 以下是一个简单的示例代码，演示如何使用pandas读取Excel文件并绘制柱状图： ```python import pandas as pd import matplotlib.pyplot as plt # 读取Excel文件 df = pd.read_excel('data.xlsx') # 统计每个类别的数量 counts = df['category'].value_counts() # 绘制柱状图 plt.bar(counts.index, counts.values) plt.xlabel('Category') plt.ylabel('Count') plt.show() ``` 在这个例子中，我们首先使用pandas读取名为“data.xlsx”的Excel文件。然后，我们使用value_counts()函数计算每个类别的数量，并将结果存储在counts变量中。最后，我们使用matplotlib库绘制柱状图，显示每个类别的数量。 这只是一个简单的示例，你可以使用pandas和其他可视化库来进行更复杂的数据分析和可视化。 ### 回答2： pandas是Python中常用的数据处理库，利用pandas读取Excel文件并进行可视化可以方便地帮助我们分析数据。 1. 读取Excel文件 首先，我们需要导入pandas库，并使用read_excel()函数读取Excel文件。例如，我们可以使用以下代码读取名为example.xlsx的Excel文件： ``` import pandas as pd df = pd.read_excel('example.xlsx') ``` 这样，我们就将Excel文件中的数据读取到了DataFrame对象df中，可以使用df.head()函数查看前5行数据。 2. 数据清洗和准备 在进行可视化之前，我们需要对数据进行清洗和准备，确保数据格式正确、缺失值处理等方面的问题。 例如，我们可以使用fillna()函数对缺失值进行填充，并使用astype()函数将数据类型转换为合适的类型。例如： ``` df = df.fillna(0) df['price'] = df['price'].astype('int') ``` 3. 数据可视化 完成数据清洗后，我们可以使用Python中的各种数据可视化库进行展示。 例如，我们可以使用Matplotlib库绘制柱状图、折线图、散点图等图表，可以使用Seaborn库绘制更加美观的统计图表等。 以下是通过Matplotlib库绘制折线图的示例代码： ``` import matplotlib.pyplot as plt plt.plot(df['date'], df['price']) plt.xlabel('Date') plt.ylabel('Price') plt.title('Stock Price Variation') plt.show() ``` 这份代码将根据df中的日期和价格数据绘制折线图，并使用xlabel()、ylabel()和title()函数设置图表中的x轴标签、y轴标签和标题。 通过这种方法，我们可以使用pandas库读取Excel文件，并使用Python中的可视化库方便地进行数据可视化。 ### 回答3： Pandas是一个开源的Python库，用于数据分析和数据处理，也被广泛使用于数据科学领域。其中，Pandas读取Excel文件是其重要的应用之一，Pandas支持多种文件格式的读取和写入，包括CSV、Excel、JSON、SQL、HTML、HDF5等，本文将着重介绍如何使用Pandas读取Excel文件并进行可视化展示。 一、Pandas读取Excel文件 Pandas读取Excel文件需要使用到Pandas库和Openpyxl库，如果没有安装，可以使用以下命令进行安装： ```python pip install pandas openpyxl ``` Pandas读取Excel文件的核心函数为read_excel()函数，可以通过以下代码实现读取Excel文件： ```python import pandas as pd # 读取Excel文件 data = pd.read_excel("example.xlsx") # 打印读取的数据 print(data) ``` 其中，example.xlsx为待读取的Excel文件名，data为读取到的数据。如果Excel文件中有多个Sheet页，可以使用Sheetname参数指定读取某一个Sheet页，例如： ```python # 读取Excel文件中的第一个Sheet页 data = pd.read_excel("example.xlsx", sheetname=0) ``` 二、Pandas数据可视化 Pandas也提供了丰富的数据可视化工具，可以使用Matplotlib和Seaborn等库进行可视化。以下是Pandas进行数据可视化的示例代码： ```python import pandas as pd import matplotlib.pyplot as plt import seaborn as sns # 读取Excel文件 data = pd.read_excel("example.xlsx") # 绘制饼图 data.plot(kind='pie', y='数量', labels=data['名称'], autopct='%1.1f%%') plt.ylabel('') # 绘制柱状图 sns.barplot(x='名称', y='数量', data=data) # 显示图形 plt.show() ``` 其中，data.plot()函数可以绘制数据的饼图，sns.barplot()函数可以绘制数据的柱状图，其他的图形种类可以参考Pandas官方文档。 需要注意的是，当需要集成托尔绘图图形和 Pandas 时，需要导入： `from matplotlib.ticker import FuncFormatter` 三、Pandas读取Excel文件的其他参数 在实际使用中，还可以通过设置参数进行更加详细的数据读取和处理，例如header参数可以控制读取Excel文件的表头，index_col参数可以指定将哪一列作为索引列，例如： ```python # 将Excel文件第一列作为索引列 data = pd.read_excel("example.xlsx", index_col=0) # 读取Excel文件表头行数为2 data = pd.read_excel("example.xlsx", header=2) ``` 另外，还可以使用skiprows、sheetname、usecols等参数实现跳过行、读取指定Sheet页、读取指定列等处理。 以上即是使用Pandas库读取Excel文件的介绍及示例，通过Pandas库读取Excel文件可以实现快速方便的数据读取和处理，同时还具有数据分析和可视化的丰富功能，是数据科学领域不可或缺的工具之一。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值