wudanixn的博客

原创 MapReduce整个流程

文章目录一、map端二、reduce端一、map端1、由InputFormat的默认实现类TextInputFormat调用createRecoderReader()方法，返回一个RecoderReader对象调用read()方法来读取，返回kv键值对。2、将返回的kv键值对输入到map()函数，作为传入参数，经过用户自定义的逻辑后，由context.write()方法输出。3、此时，输出会被outputCollector.collect()方法收集，并且写入到环形缓冲区。4、环形缓冲区底层是一个