Python中list去重的方法

1.for 循环去重

list1 = [3,2, 1, 3, 4, 7,1,5,2, 1,'测试1','测试2','测试1','测试3']
temp = []
for i in list1:
    if not i in temp:
        temp.append(i)
print(temp)

[3, 2, 1, 4, 7, 5, '测试1', '测试2', '测试3']

Process finished with exit code 0

2. 列表推导式去重

list1 = [3,2, 1, 3, 4, 7,1,5,2, 1,'测试1','测试2','测试1','测试3']
temp = []
[temp.append(i) for i in list1 if i not in temp]
print(temp)

[3, 2, 1, 4, 7, 5, '测试1', '测试2', '测试3']

Process finished with exit code 0

3. set去重

使用set的特型，python的set和其他语言类似, 是一个无序不重复元素集

list1 = [3,2, 1, 3, 4, 7,1,5,2, 1,'测试1','测试2','测试1','测试3']
temp = list(set(list1))
print(temp)

[1, 2, 3, 4, 5, 7, '测试2', '测试3', '测试1']

Process finished with exit code 0

4. 使用字典fromkeys()的方法来去重

Python 字典 fromkeys() 函数用于创建一个新字典，以序列 seq 中元素做字典的键，value 为字典所有键对应的初始值。

语法
fromkeys()方法语法：

dict.fromkeys(seq[, value])
参数
seq -- 字典键值列表。
value -- 可选参数, 设置键序列（seq）的值。
返回值
该方法返回一个新字典。

list1 = [3,2, 1, 3, 4, 7,1,5,2, 1,'测试1','测试2','测试1','测试3']
temp = {}.fromkeys(list1).keys()
print(temp)
print(list(temp))

dict_keys([3, 2, 1, 4, 7, 5, '测试1', '测试2', '测试3'])
[3, 2, 1, 4, 7, 5, '测试1', '测试2', '测试3']

5.使用sort + set去重（保持原来的顺序）

list1 = [3,2, 1, 3, 4, 7,1,5,2, 1,'测试1','测试2','测试1','测试3']
list2 = list(set(list1))
list2.sort(key=list1.index)
print(list2)

[3, 2, 1, 4, 7, 5, '测试1', '测试2', '测试3']

Process finished with exit code 0

6. 使用sorted+ set函数去重

list1 = [3,2, 1, 3, 4, 7,1,5,2, 1,'测试1','测试2','测试1','测试3']
temp = sorted(set(list1), key=list1.index)
print(temp)

[3, 2, 1, 4, 7, 5, '测试1', '测试2', '测试3']

Process finished with exit code 0