Partitioner编程

最新推荐文章于 2024-01-18 10:20:22 发布

CrazyL-

最新推荐文章于 2024-01-18 10:20:22 发布

阅读量405

点赞数

分类专栏：云计算+大数据文章标签： hadoop partition

本文链接：https://blog.csdn.net/lovelovelovelovelo/article/details/52674052

版权

云计算+大数据专栏收录该内容

59 篇文章 0 订阅

订阅专栏

根据手机号，区分运营商

public static class ProviderPartitioner extends Partitioner<Text,DataBean>{
    private static Map<String,Integer> providerMap=new HashMap<String,Integer>();
    static{
            //映射关系
            providerMap.put("135",1);
            providerMap.put("136",1);
            providerMap.put("137",1);
            providerMap.put("138",1);
            providerMap.put("139",1);
            providerMap.put("150",2);
            providerMap.put("159",2);
            providerMap.put("182",3);
            providerMap.put("183",3);
    }
    public int getPartition(Text key,DataBean value,int numPartitions){
        String account=keu.toString();
        String sub_acc=account.subString(0,3);
        Integer code = providerMap.get(sub_acc);
        if(code == null){
            code = 0;
        }
        return code;
    }
}

//组装
jod.setPartitionerClass(ProviderPartitioner.class);