python 列表去重(数组)的几种方法

python 列表去重(数组)的几种方法
一、方法1

list = [1,2,3,3,4,2,3,4,5,6,7,8,8]
news_list = []
for id in list:
if id not in newslist: # 当id不在news_list中就添加,在就不添加,达到去重的目的
news_list.append(id)
print (news_list)

思路看起来比较清晰简单 ，也可以保持之前的排列顺序。

二、方法2

通过set方法进行处理

a= [1,2,3,3,4,2,3,4,5,6,7,8,8]
list = list(set(a))
print(list)

处理起来比较简单，使用了集合方法set进行处理，不过结果不会保留之前的顺序。

三、方法3

使用itertools模块

import itertools
list = [1,4,3,3,4,2,3,4,5,6,1]
list.sort()
it = itertools.groupby(list)
for k, g in it:
print (k)