![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop学习笔记
Vasari
这个作者很懒,什么都没留下…
展开
-
MapReduce原理与设计思想
简单解释 MapReduce 算法 一个有趣的例子 你想数出一摞牌中有多少张黑桃。直观方式是一张一张检查并且数出有多少张是黑桃? MapReduce方法则是: 给在座的所有玩家中分配这摞牌让每个玩家数自己手中的牌有几张是黑桃,然后把这个数目汇报给你你把所有玩家告诉你的数字加起来,得到最后的结论 拆分 MapReduce合并了两种经典函数: 映射(M翻译 2015-08-12 15:18:49 · 1195 阅读 · 0 评论 -
MapReduce原理
以WordCount程序为例,假设有三台DataNode,每台DataNode有不一样的数据,如下表格所示: DataNode1 DataNode2 DataNode3 who are you are who am i are who is he am 经过Map函数后,生成以下键值对转载 2015-08-12 15:25:22 · 363 阅读 · 0 评论