mapreduce简单编写
一. MapReduce 编程模型
还是以一个经典的图片来说明问题.
1. 首先, 我们能确定我们有一份输入, 而且他的数据量会很大
2. 通过split之后, 他变成了若干的分片, 每个分片交给一个Map处理
3. map处理完后, tasktracker会把数据进行复制和排序, 然后通过输出的key 和value进行 partition的划分, 并把partition相同的map输...
原创
2019-11-28 14:16:09 ·
233 阅读 ·
0 评论