group by分组和distinct去重导致数据量变大

本文探讨了SQL查询中数据去重的问题,解释了为何通过公司名字和地域分组查询会导致数据总量增多。分析指出,存在相同名字但不同地域的脏数据。为解决此问题,提出了使用`GROUP_CONCAT`函数查找并处理这些脏数据的方法,以确保数据的一致性和准确性。
摘要由CSDN通过智能技术生成

问题出现:
1.表通过公司名字distincy去重查询数据100条

select count(distinct name) as c from table 

2.表通过公司地域分组和通过公司名字去重查询数据101条

select count(distinct name) as c , area as b from table group by area

问题分析:
存在相同名字不同地域的数据,SQL2先group by 把相同名字的数据分到不同的组里,然后在不同的组里面去distinct去重,所以导致SQL数据总量增多
问题解决:
找到脏数据,处理脏数据,当前我通过下面SQL查找相同名字不同地域的数据,然后修改脏数据解决问题.

select name ,group_concat(area) from table group by name
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值