3-2 wordcount执行流程 wordcount流程

mapper和reducer输入和输出都是以(key,value)形式的。

在map和reduce之间进行了分组group，按照key2来分组，然后将v2放在一个集合中，作为一个value。

eg：<a,1><a,3>分为a<1,3>

【shuffule非常重要，明天讲】

如果我们想实现mapreduce模型，只需要重写map方法和reduce方法即可，适合各种业务。

mapreduce执行过程：

map任务： 【记住】

1.读取文件内容，一行内容解析成一个key,value【怎么做的？一会儿介绍】一个（key，value）对执行一次map函数方法

2.在map里实现自己的业务逻辑，转换成新的key，value，然后输出

3.对输入的key，value分区

4.对不同分区的数据，排序分组。</