python中对dict组成的list进行去重

最新推荐文章于 2024-04-30 10:56:55 发布

Agtmwgam

最新推荐文章于 2024-04-30 10:56:55 发布

阅读量3.1k

点赞数 2

文章标签： python dict去重 list去重 list中的dict去重 python去重

本文链接：https://blog.csdn.net/u013150378/article/details/113854773

版权

本文介绍了一个Python函数，展示了如何使用lambda表达式和reduce函数去除列表中字典的重复数据，重点在于处理两个字典因部分属性相同导致的重复。通过实例和代码，提供了去重后的测试数据和实际效果。

摘要由CSDN通过智能技术生成

直接上例子代码

    def set_dict(self):
        print('------start set_dict')
        result_list = []
        dict1 = {'name': 'zhangsan', 'long': 172, 'description': '高的人'}
        dict2 = {'name': 'lisi', 'long': 172, 'description': '高的人'}
        dict3 = {'name': 'zhangsan', 'long': 172, 'description': '高的人'}
        dict4 = {'name': 'zhangsan', 'long': 172, 'description': '高的'}
        result_list.append(dict1)
        result_list.append(dict2)
        result_list.append(dict3)
        result_list.append(dict4)
        print(result_list)
        return result_list

上面这个函数出来的结果是我们本次的测试数据，结果如下：

[{
	'name': 'zhangsan',
	'long': 172,
	'description': '高的人'
}, {
	'name': 'lisi',
	'long': 172,
	'description': '高的人'
}, {
	'name': 'zhangsan',
	'long': 172,
	'description': '高的人'
}, {
	'name': 'zhangsan',
	'long': 172,
	'description': '高的'
}]

不难看到结果的list里面有两个dict的结果是一样的，就是172的张三是高的人，我们要想办法去掉这个数据，各种百度之后找到一个比较方便的方法，具体如下：

    ''' 对list格式的dict进行去重'''
    def remove_list_dict_duplicate(self, list_dict_data):
        run_function = lambda x, y: x if y in x else x + [y]
        return reduce(run_function, [[], ] + list_dict_data)

执行后结果如下：

[{
	'name': 'zhangsan',
	'long': 172,
	'description': '高的人'
}, {
	'name': 'lisi',
	'long': 172,
	'description': '高的人'
}, {
	'name': 'zhangsan',
	'long': 172,
	'description': '高的'
}]

已经去掉了重复数据，感觉很实用，记录一下。