hadoop
Hubery_Yu_160521
这个作者很懒,什么都没留下…
展开
-
浅显易懂的来讲解Mapreduce-shuffle原理
浅显易懂的讲解mapreduce的shuffle原创 2016-12-25 23:12:19 · 846 阅读 · 0 评论 -
深入分析MapReduce shuffle过程
与上一篇博客不同,本篇博客重点介绍mapreduce shuffle的详细过程,完全是理论知识。 MapReduce的Shuffle过程介绍 为什么MapReduce计算模型需要Shuffle过程?我们都知道MapReduce计算模型一般包括两个重要的阶段:Map是映射,负责数据的过滤分发;Reduce是规约,负责数据的计算归并。Reduce的数据来源于Map,Map的输出即是Reduce的输入转载 2016-12-29 14:21:21 · 299 阅读 · 0 评论