进阶的阿牛哥之duplicated去重：去掉某列中的重复值所在的行（保留第一个，或最后一个，或都不保留）

最新推荐文章于 2023-06-05 22:41:06 发布

进阶的阿牛哥

最新推荐文章于 2023-06-05 22:41:06 发布

阅读量1.2k

点赞数 1

本文链接：https://blog.csdn.net/weixin_49167820/article/details/115599262

版权

import pandas as pd 

df=pd.DataFrame({'a':['1','2','3','4','2','7'],
				'b':['3','4','5','6','7','5'],
				'c':['5','7','9','8','4','9']})
print(df)

结果：
在这里插入图片描述
我们可以观察到：a列中，有值‘2’是重复的。
我们通过python验证下：

import pandas as pd 

df=pd.DataFrame({'a':['1','2','3','4','2','7'],
				'b':['3','4','5','6','7','5'],
				'c':['5','7','9','8','4','9']})
#print(df)

k=df[df['a'].duplicated(keep=False)]	#"first", "last" or False
print(k)	#a列中有重复的值，所在的数据行

结果：
在这里插入图片描述
如果要逆向获取不重复的数据：则加上符号~

如果是要将重复的行，保留首次出现的，则keep参数为‘first’；
如果是要将重复的行，保留最后出现的，则keep参数为‘last’。