MapReduce 分布式运算程序 数据处理流程

《MapReduce 程序在yarn上分布式运行的流程》
1.MR客户端请求Resource Manager
2.Resource Manage 响应客户端回应 给与了jobid的资源提交路径
3.客户端发起请求查看目录下的信息，根据信息计算切片任务
4.上传自身的jar包文件
5.job对象序列化
6.向Resource Manage 请求一个容器
7.Resource Manage 的容器分配队列 领取任务，并在其他NodeManage上创建了一个MRAppMaster
8.MRAppMaster 下载hdfs中的工作目录到本地的工作目录
9.客户端想MRAppMaster 发送shell命令
10.MRAppMaster 向Resource Manager 申请容器
11.领取任务，创建容器
12.各容器执行任务执行完销毁，客户端监视执行进度

《MapReduce 分布式运算程序 数据处理流程》