MapReduce
Ele_sorriu
这个作者很懒,什么都没留下…
展开
-
MapReduce阶段基础知识(详细)
目录 什么是计算框架? 什么是并行计算框架? 什么是分布式计算? MapReduce核心思想 MapReduce并行计算 MapReduce设计构思 Hadoop MapReduce构思体现在如下的三个方面: 如何应对大数据处理:分而治之 构建抽象模型:Map和Reduce 统一构架,隐藏系统层细节 MapReduce的combiner MapTask运行机制详解以及Map任务的并行度 ..原创 2020-11-11 17:20:26 · 23066 阅读 · 1 评论 -
Hadoop-MapReduce reduce端join与map端join算法实现
reduce端join与map端join算法实现reduce端join与map端join算法实现reduce端join算法实现JavaBean类Map类Reduce类Driver类map端join算法实现Map类Driver类reduce端join算法实现JavaBean类import org.apache.hadoop.io.WritableComparable;import java.io.DataInput;import java.io.D.原创 2020-11-06 20:33:27 · 20840 阅读 · 0 评论 -
Hadoop-MapReduce基本代码一览
Hadoop-MapReduce基本代码一览Hadoop-MapReduce基本代码一览JavaBean类Map类Partitions类Reduce类Driver类JavaBean类import org.apache.hadoop.io.Writable;import java.io.DataInput;import java.io.DataOutput;import java.io.IOException;public class PhoneBean .原创 2020-11-06 20:27:25 · 20888 阅读 · 0 评论