如何过滤数据倾斜的key
如下可以看出来那个key的数量多
select ifa,cnt from (select ifa,count(ifa) cnt from dmp.tbl_7 group by ifa) a order by a.cnt desc;
然后再处理时候将这几个key去除掉就好了
如何过滤数据倾斜的key
如下可以看出来那个key的数量多
select ifa,cnt from (select ifa,count(ifa) cnt from dmp.tbl_7 group by ifa) a order by a.cnt desc;
然后再处理时候将这几个key去除掉就好了