pandas drop_duplicates()函数 去重

DataFrame.drop_duplicates(subset=None,keep='first',inplace=False)

参数：

subset	列标签，可以指定
keep	first,last,False 分别表示保留第一次出现的重复行，最后一次出现的重复行，去除所有重复行
inplace	True表示在原来数据删除重复项，默认False 生成新的副本

 

import numpy as np
from pandas import DataFrame
test = [['a','a'],
        ['a','b'],
        ['a','a'],
        ['c','b']
        ]
test = DataFrame(np.array(test))
test1 = test.drop_duplicates(keep='first')#删除重复项并保留第一次出现的额重复项
test2 = test.drop_duplicates([0],keep='first')#在第0列删除重复项
test2 = test.drop_duplicates([1],keep='first')#在第一列删除重复项
print(test)
print(test1)
print(test2)

   0  1
0  a  a
1  a  b
2  a  a
3  c  b

   0  1
0  a  a
1  a  b
3  c  b

   0  1
0  a  a
1  a  b