Hadoop & MR
Hadoop以及MR相关知识
EnterPine
这个作者很懒,什么都没留下…
展开
-
Hadoop中MapReduce的自定义分区、排序、分组
分区:在MR的job中,默认使用的分区类为:HashPartitioner.class其源代码为:public class HashPartitioner<K, V> extends Partitioner<K, V> { public HashPartitioner() { } public int getPartition(K key, ...原创 2019-07-24 16:29:15 · 686 阅读 · 0 评论 -
Hadoop中Writable类笔记
Writable接口:包名:org.apache.hadoop.io方法:write(DataOutput var1) 用于序列化对象方法:readFields(DataInput var1) 用于反序列化对象Comparable接口:包名:java.lang方法:compareTo(T o) 用于比较大小,排序可能会调用WritableComparable...原创 2019-08-26 11:11:22 · 550 阅读 · 0 评论