【大数据】MapReduce原理(2)

MapReduce中自定义传递对象

自定义传递对象:
1. 自定义key传递对象需要实现WritableComparable接口。
这里写图片描述
注意:这里定义类必须有无参构造函数,否则会报错。
2. 自定义key传递对象需要实现Writable接口。
这两种实现区别在于:MapReduce在map阶段会对结果按key进行排序,所以需要实现Comparable的比较方法:
这里写图片描述
同时还要重写序列化的方法(map传递到reduce的时候需要将key和value序列化,所以这里需要重写序列化方法):
这里写图片描述

MapReduce的JavaAPI杂记

  • 获取当前切片文件名。
    这里写图片描述
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值