Mapreduce多种输入

是mapreduce中的一种类型,记录下

主要使用了MultipleInputs类,允许对不同的输入路径指定InputFormat和Mapper,
对reduce并没有什么影响

//job.setMapperClass(Mapper.class); 就不要了
MultipleInputs.addInputPath(job, new Path(input1), TextInputFormat.class,Mapper1.class);
MultipleInputs.addInputPath(job, new Path(input2), TextInputFormat.class,Mapper2.class);

其他详解博客
hadoop 之 MultipleInputs–为多个输入指定不同的InputFormat和Mapper
https://blog.csdn.net/andrewgb/article/details/49560031
MapReduce基础开发之六Map多输入 https://blog.csdn.net/fjssharpsword/article/details/51829437

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值