hadoop
文章平均质量分 77
chanlan1982
这个作者很懒,什么都没留下…
展开
-
MapReduce:详解Shuffle过程
转:http://blog.csdn.net/a221133/article/details/8605218Shuffle过程是MapReduce的核心,也被称为奇迹发生的地方。要想理解MapReduce, Shuffle是必须要了解的。我看过很多相关的资料,但每次看完都云里雾里的绕着,很难理清大致的逻辑,反而越搅越混。前段时间在做MapReduce job 性能调优的工作,需要深入代码研究M...原创 2013-09-12 23:31:54 · 120 阅读 · 0 评论 -
How MapReduce Works
转:http://sishuok.com/forum/blogPost/list/5594.html一、从Map到ReduceMapReduce其实是分治算法的一种实现,其处理过程亦和用管道命令来处理十分相似,一些简单的文本字符的处理甚至也可以使用Unix的管道命令来替代,从处理流程的角度来看大概如下:cat input | grep | sort | uniq -c | ...原创 2013-09-12 23:35:54 · 177 阅读 · 0 评论 -
hadoop 不错文章
请前往http://www.cnblogs.com/chinacloud/archive/2010/12/03/1895369.html观看。该文作者介绍的非常不错。2013-10-15 11:06:22 · 209 阅读 · 0 评论