MapReduce&Yarn 运行原理
希望大家多多点赞 ,多多关注。 有问题大家随时讨论。
MR程序运行阶段:
1.map task 读文件,是通过TextInputFormat(默认)(-->RecordReader-->
read()) 一次读一行,
返回key value,-->Mapper{map(k,v);context.write;输出}-->OutPutCollector收集器-->写到环形缓冲区(默认10
原创
2017-09-07 23:46:53 ·
272 阅读 ·
0 评论