dataframe某列去重最快的方式，以及使用xlwing把列表中的内容粘贴进excel

最新推荐文章于 2024-08-06 04:33:16 发布
最新推荐文章于 2024-08-06 04:33:16 发布
阅读量2.1k 收藏
点赞数
分类专栏： python办公自动化
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ahxttt/article/details/103755994
版权

如图，我需要对某数据进行数据清洗，其中开户行别需要统一，即，中国银行，中国银行股份有限公司，这种实际上是一个行别，需要统一，目前需要把十几万条数据，行别字段进行去重，先看看公共有哪些行别
用到的方法为set
直接用set 也是很快的，我试了一下set 和dict 以秒为单位运行13万数据没有差别，那不如用代码简单的哦
在这里插入图片描述

list_bankcode_net=list(set(list(raw_data['开户行'])))
exceFile.sheets.add('本次待遇支付行别'+str(date_today))
exceFile.sheets['本次待遇支付行别'+str(date_today)].range('A1').options(transpose=True).value=list_bankcode_net

最终实现结果如下
在这里插入图片描述

萌兔biubiu
关注
专栏目录
xlwings复制sheet_Python操作Excel的Xlwings教程（六）
weixin_34186408的博客
01-26 3449
最近在使用Xlwings的时候，发现有对Excel表格进行设置字体大小和颜色等操作。想必小伙伴们在日常的工作中也遇到了这样的问题，为此我这里总结一些操作供大家参考：一、创建表格import xlwings as xw App = xw.App(visible=False, add_book=False) wb = App.books.add() sheet = wb.sheets.add('tes...
python dataframe去重_Python Dataframe 指定多列去重、求差集的方法
weixin_39946239的博客
11-28 1472
Python Dataframe 指定多列去重、求差集的方法1）去重指定多列去重，这是在dataframe没有独一无二的字段作为PK（主键）时，需要指定多个字段一起作为该行的PK，在这种情况下对整体数据进行去重。Attention：主要用到了drop_duplicates方法，并设置参数subset为多个字段名构成的数组。具体代码如下：>>>import pandas as pd>>>data={...
使用python xlwing操作excel
02-24
使用python xlwing操作excel，使用手册，内含函数说明
pandas.DataFrame去重
热门推荐
诸葛老刘的博客
09-26 3万+
pandas.DataFrame 去重 去重的方式: 样本数据 In [1]: import pandas as pd In [2]: df = pd.DataFrame({'colA' : list('AABCA'), 'colB' : list('AABDA'),'col ...: C' : [100,100,30,50,20], 'colD': [100,100,60,80,50]...
python dataframe某列去重
最新发布
weixin_42376940的博客
08-06 149
Python DataFrame 某列去重的实现教程 近年来，随着数据分析的普及，Pandas库在Python中变得越来越流行。Pandas中的DataFrame是处理表格数据的核心数据结构，其中有时我们需要对某一列进行去重操作。本文将会详细说明如何实现这一功能，并为刚入行的小白提供清晰的指导。 整体流程 首先，我们来概述...
Python数据分析实战-将dataframe某一列的去重并统计去重后数量（附源码和实现效果）
数据杂坛
06-07 3244
Python数据分析实战-将dataframe某一列的去重并统计去重后数量（附源码和实现效果）
DataFrame数据框模糊查询与去重
m0_54238780的博客
08-18 3591
模糊查询：data[data.列名.str.contains()]， 去重：DataFrame.drop_duplicates(subset=None,keep='first',inplace=False)
python pandas dataframe 去重函数的具体使用
09-16
在Python数据分析领域，Pandas库是非常重要的工具，其DataFrame对象是处理二维表格数据的主要方式。在实际工作中，我们经常会遇到需要去除重复数据的情况，这时Pandas的`drop_duplicates`函数就显得尤为关键。本文将...
Python Dataframe 指定多列去重、求差集的方法
09-20
在本文中，我们将详细探讨如何在 DataFrame 中指定多列进行去重以及如何求两个 DataFrame 的差集。 1. **指定多列去重** 当 DataFrame 中没有唯一的标识符（主键，Primary Key）时，我们需要基于多个列的组合来...
Pandas：对两个dataframe文件按照某列去重
qq_38524083的博客
10-10 3043
提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录场景描述1.代码2.运行结果 场景描述       最近处理大的日志文件遇到同一个block_id既出现在正常日志文件中，又出现在异常日志文件中的情况。因此需要剔除这个blk_id所对应的日志信息。       虽然按照传统的匹配方法就能解决这一问题，但是需要运行很长的时间。考虑到时间成本，我打算使用现有的pan
xlwings文档学习--第7章Data structures 数据结构
oldwayphone的博客
06-19 3811
In [1]:# 导入基本包 import xlwings as xw import numpy as np import pandas as pd In [4]:# 打开目标文件 wb = xw.Book(r'C:\Users\Track1\PycharmProjects\xlwing\xlwings_if\xlwings_if.xlsm') In [5]:import datetime as ...
xlwings——Python for Excel——xlwings读取整个sheet到pandas.DataFrame
恰排骨芸豆包嘛的博客
07-02 4167
为了处理excel数据更快，使用如下方法： import xlwings as xw import pandas as pd from pandas import Series,DataFrame wb = app.books.add() sht_All = wb.sheets[0] info = sht_All.used_range nrows = info.last_cell.row ...
xlwings|读取一整个sheet到pandas.DataFrame
恰排骨芸豆包嘛的博客
05-06 3317
https://mp.weixin.qq.com/s/-EGrdXeA2J8YfudRI5DoNg
python Dataframe类型去重
jw0413的博客
08-14 2399
（1）False表示不对原始数据进行去重工作，例如示例代码中data1内容不改变，将处理结果赋予data参数中，原文链接：https://blog.csdn.net/gisaavg/article/details/124516669。2、keep='' 表示对选中的重复数据操作策略，可选择的参数为'first'、'last'和'False'三种。（1）'first'表示在识别的重复项中保留按照索引顺序的第一个内容，其余删除，（2）'last'表示在识别的重复项中保留按照索引顺序的最后一个内容，其余删除，
Python_Dataframe_去除重复数据
gisaavg的博客
04-30 1万+
去除重复数据——drop_duplicates 去除指定单列或多列中的完全重复的项通过drop_duplicates()函数实现，需要利用Pandas包。 其中： 1、subset=[] 表示整个dataframe基于[]内选定列进行数据重复内容识别，可以添加多列数据进行识别。 （1）添加一列列名时表示对选中的单列数据进行重复数据识别， （2）添加多列时则表示识别多列数据同时重复的情况； 2、keep='' 表示对选中的重复数据操作策略，可选择的参数为'first...
python xlwings 复制工作表
xcntime的专栏
04-12 1万+
python xlwings 复制工作表 其实xlwings并没有提供复制工作表的相应函数，要实现复制工作表功能，需要调用excel的vba里面的相应方法worksheet.Copy 下面看excel vba的帮助文档： 应用于 Chart、Charts、Sheets、Worksheet 和 Worksheets 对象的 Copy 方法。 将指定工作表复制到工作簿的另一位置。 expression.Copy(Before, After) expression 必需。该表达式返回上面的...
dataframe某一列的去重值及数量
qq_41973062的博客
12-15 7321
dataframe某一列的去重值及数量 dataframe某一列的去重值 df["uid"].unique() dataframe某一列的去重值的个数 len(df["uid"].unique())
python数据处理——dataframe指定多列去重，求差集
m0_37876745的博客
07-09 9651
1）去重 指定多列去重，这是在dataframe没有独一无二的字段作为PK（主键）时，需要指定多个字段一起作为该行的PK，在这种情况下对整体数据进行去重。 Attention：主要用到了drop_duplicates方法，并设置参数subset为多个字段名构成的数组。 >>>import pandas as pd >>>data={'stat...
dataframe一列去重
03-29
可以使用`drop_duplicates`方法来去除DataFrame一列中的重复值，示例代码如下： ```python import pandas as pd df = pd.DataFrame({ 'A': [1, 2, 3, 4, 4, 5], 'B': ['a', 'b', 'c', 'd', 'd', 'e'] }) # 对B列进行去重，保留第一个出现的值 df['B'] = df['B'].drop_duplicates(keep='first') print(df) ``` 输出结果为： ``` A B 0 1 a 1 2 b 2 3 c 3 4 d 5 5 e ``` 其中`keep`参数用于指定去重后保留哪个值，可选值为`first`（保留第一次出现的值）、`last`（保留最后一次出现的值）和`False`（全部去除）。默认值为`first`。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值