dataframe两个表合并_6000字长文,带你用Python完成 “Excel合并(拆分)” 的各种操作!...

为什么需要加星标?

由于微信公众号出现了 “乱序” 排列的状况,也就是说:文章不会按照 “时间顺序” 推送给你。那么朋友们就不能第一时间,收到我的干货。因此希望您抽出一分钟,完成如下三步

数据分析与统计学之美

原创干货+原创文档 干货满满 , 值得星标

01

aa569f1822b0d83460b195077de42d62.png

02

c8d912cfc8bacbb5cc9a8d6bb82c9703.png

03

8481ff3342ce46ba6f1e9a01ccd0d17e.png

三步加星标

一、概述

‍ ‍ ‍ ‍ ‍ ‍ ‍ ‍ ‍
1a0d8ff2aa46f5579cc03989960d2c50.png

其实Excel合并这个需求,应该是一个极为普遍的需求了。今天我们就利用Python完成“Excel合并(拆分)” 操作,具体如下:

  • ① 将多个Excel表,合并到一个Excel中(每个Excel中只有一个sheet表);
  • ② 将多个Excel表,合并到一个Excel中(每个Excel中不只一个sheet表);
  • ③ 将一个Excel表中的多个sheet表合并,并保存到同一个excel;
  • ④ 将一个Excel表,按某一列拆分成多张表;

二、知识点讲解

d647228d4a3b8c323b988256f5c4bb54.png

其实完成这些操作,涉及到了太多的知识点,因此在讲述上述这个知识点以前,我们要带大家复习一些常用的知识点。

  • ① os模块常用知识点讲解;
  • ② pandas模块常用知识点讲解;
  • ③ xlsxwriter模块常用知识点讲解;
  • ④ xlrd常用知识点讲解;

1. os模块知识点讲解

对于os模块,我们主要讲述os.walk()、os.path.join()等知识点。

1.1 os.walk()

对于这个知识点,我们需要说明以下几点:

  • os.walk()的返回值是一个生成器(generator),我们需要循环遍历它,来获取其中的内容;
  • 每次遍历,返回的都是一个三元组(path, dirs, files);
  • path:返回的是当前正在遍历的这个文件夹的,本身路径地址;
  • dirs:返回的是该文件夹中所有目录的名字(不包含子目录),有多少个都以“列表”返回;
  • files:返回的是该文件夹中所有的文件(不包含子目录下的文件),有多少个都以“列表”返回;

如果说,有一个如图所示的文件夹。

d9ea8c49764c0326cf6c032f5e85977a.png

利用下方的代码,我们可以得到什么结果呢?

"G:\\a"

结果如下:

0x0000029BB5AEAB88>
('G:\\a', [], ['aa.txt', 'bb.xlsx', 'cc.txt', 'dd.docx'])
['aa.txt', 'bb.xlsx', 'cc.txt', 'dd.docx']
1.2 os.path.join()

这个函数,主要用于将多个路径组合后返回,超级简单,就不做过多阐述。

'G:\\a'

结果如下:

G:\a\aa.txt

2. pandas模块知识点讲解

由于是需要利用Pandas进行Excel的合并,因此我们要学会,如何利用Pandas进行数据的纵向合并。

我们先创建2个数据框(DataFrame):

import numpy 

效果如下:

a328510fce642802b3da2bfb1cb4cc49.png

接着,可以利用Pandas中的concat()函数,完成纵向拼接的操作。

  • pd.concat(list)中【默认axis=0】默认的是数据的纵向合并;
  • pd.concat(list)括号中传入的是一个列表;
  • ignore_list=True表示忽略原有索引,重新生成一组新的索引;
  • 或者直接可以写成z = pd.concat([xx,yy],ignore_list=True);
concat_list = []
concat_list.append(xx)
concat_list.append(yy)
z = pd.concat(concat_list,ignore_list=True)
print(z)

效果如下:

9b7f9cb30f4ed4b1c89dd4935a712e8f.png

3. xlsxwriter模块知识点讲解

xlsxwriter模块一般是和xlrd模块搭配使用的, xlsxwriter:负责写入数据, xlrd:负责读取数据。接下来,我们分别对这两个库的常见用法,进行介绍。

1)如何创建一个“工作簿”?
import xlsxwriter
2)如何添加一个“Sheet工作表”

我们知道,一个Excel文件就是一个Excel工作簿,而每一个工作簿中,又有很多的“Sheet工作表”。接下来,我们如何用代码实现这个操作呢?

import xlsxwriter

效果如下:

1b9aca6234fca4aeaf8d9dfbdb249a93.png
3)如何向表中插入数据呢?
import xlsxwriter

效果如下:

28831e542e66f3a498aac78184e7b011.png

4. xlrd模块知识点讲解

这里有一个工作簿“test.xlsx”,该文件中有两个“Sheet工作表”,分别命名为“2018年销售量”、“2019年销售量”,如图所示。

651b253498bc0b06ecff8cf6690f61d2.png
1)如何打开一个“工作簿”?—>open_workbook()
# 这里所说的"打开"并不是实际意义上的打开,只是将该表加载到内存中打开。

结果如下:

0x29bb8e4eda0>
2)如何获取一个工作簿下,所有的“Sheet表”名?—>sheet_names()
import xlrd

结果如下:

'2018年销售量', 
3)如何获取所有“Sheet表”的对象列表?—>sheets()
import xlrd

结果如下:

[0x29bb8f07a90>, 0x29bb8ef1390>]

我们可以利用索引,获取每一个sheet表的对象,然后可以针对每一个对象,进行操作。

0]
4)如何获取每个Sheet表的行列数?—>nrows和ncols属性
import xlrd
5)按行获取,每个Sheet表中的数据—>row_values()
import xlrd

效果如下:

3ed3ee25f8a4d0260f6723c89f667f4c.png

三、案例讲述

43f3271b91add7c69521b67714e6433f.png

1. 将多个Excel表,合并到一个Excel中(每个Excel中只有一个sheet表)

有四张表,图示中一目了然,就不做过多解释。

c243109bb195d0e4e773afed5b69385d.png

实现代码如下:

import pandas 

结果如下:

aceeeaf623ba2c63c02c9658bc01bc6d.png

2. 将多个Excel表,合并到一个Excel中(每个Excel中不只一个sheet表)

有两个工作簿,如图所示。一个工作簿是pp.xlsx,一个工作簿是qq.xlsx。工作簿pp.xlsx下,有sheet1和sheet2两个工作表。工作簿qq.xlsx下,也有sheet1和sheet2两个工作表。

2fce197cd7f6125c75eaf8c205720c72.png

实现代码如下:

import xlrd

效果如下:

15322f8c072be06879fa0edd63e2a458.png

3. 将一个Excel表中的多个sheet表合并,并保存到同一个excel

9553659b03a95c32a8d7c21b6c5c6805.png

实现代码如下:

import xlrd

效果如下:

5b78e5adc75cfd2ab9325357993ad3d5.png

4. 将一个Excel表,按某一列拆分成多张表

9668ecf71185c3764a3421a4d48552b3.png实现代码如下:

import pandas 

效果如下:

465da9045a077e5d4d3348ca331ae643.png

往期推荐:

分享3套 “真实” 的MySQL面试题,赶紧做个自测吧!

为了探究妹纸对 “bra” 的喜好!趁着“双11”来临之际,我爬取了淘宝......

发布一则通知:想说一件事儿!

最近有人问:Python爬虫进阶学什么?看看本文的总结,会了吗?

CSDN文章被洗稿、抄袭严重!用Python做一个“基于搜索引擎的文章查重工具”,解决!

用Python讲述:地理“经纬度”数据的4种转换方法!

a68ffabfa294325750b1c520ff5c0d4a.gif
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值