python处理列表中字典_请教一下 Python 中列表字典清洗数据的问题

necomancer

2018-12-05 11:24:04 +08:00

数据少的话：

lst = sorted(l, key=(lambda x : x.get('type')))

ret = [[]]

for prv, nxt in zip(lst[:-1], lst[1:]):

....tmp = ret[-1]

....tmp.append(prv)

....if prv['type']!=nxt['type']:

........ret.append([])

tmp = ret[-1]

tmp.append(t[-1])

然后取 ret 里最多的，或者直接用 groupby

[ list(g) for c, g in groupby(lst, key=(lambda x : x.get('type'))) ]

但是都需要排序。

或者用 pandas:

import pandas as pd

l= [{'name': 'aa', 'type': '游戏'},

{'name': 'cc', 'type': '学习'},

{'name': 'bb', 'type': '游戏'}] # 可以不用考虑顺序

list(pd.DataFrame(l).groupby('type')) 可以搞定，输出是 n 个 categories 的 tuple 的 list

[(分组名 1，分组 1 数据的 dataframe),(分组名 2，分组 2 数据的 dataframe)...]，数据大小可以用 dataframe 的 shape 来确定。

In [40]: list(pd.DataFrame(l).groupby('type'))

Out[40]:

[('学习', name type

1 cc 学习), ('游戏', name type

0 aa 游戏

2 bb 游戏)]

In [41]: p=list(pd.DataFrame(l).groupby('type'))[1][1]

In [42]: p.shape

Out[42]: (2, 2)

In [43]: p

Out[43]:

name type

0 aa 游戏

2 bb 游戏

对一定量的数据，pandas 就可以有很高的处理效率了，如果数据量再大，考虑上 #1 的方法吧。