Hadoop之MapReduce编程模型

一、MapReduce编程模型

        MapReduce将作业的整个运行过程分为两个阶段：Map阶段和Reduce阶段
        Map阶段由一定数量的Map Task组成
            输入数据格式解析：InputFormat
            输入数据处理：Mapper
            数据分组：Partitioner
       Reduce阶段由一定数量的Reduce Task组成
            数据远程拷贝
            数据按照key排序
            数据处理：Reducer
            数据输出格式：OutputFormat

二、MapReduce工作原理图

         

三、MapReduce编程模型—内部逻辑

         

四、MapReduce编程模型—外部物理结构

      

<