![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Yarn的工作流程
牛犊6
苦心人,天不负
展开
-
Yarn详细的工作流程
yarn详细工作流程 第一步:客户端向ResourceManager 申请运行程序 第二步:ResourceManager 检查是否有运行权限,如果有就会返回jobid和程序提交的资源路径 第三步:根据ResourceManager返回的信息,然后执行 第四步:客户端提交程序的资源到tmp/hadoop-yarn-staging/job_id目录下(jar程序本身,job.split逻辑切规划文...原创 2020-03-15 20:25:35 · 2072 阅读 · 0 评论 -
yarn简单介绍
1.HDFS 管理者:namenode 工作者:datanode 2.MapReduce 管理者:JobTracker 3.工作者:TaskTracker Yarn 管理者:ResourceManager 工作者:nodeManager 问题一: 集群提交任务时,是什么决定任务分配到哪个节点上? yarn 问题二: 集群提交任务,偶尔成功,偶尔失败(使用尾部配置文件) 程序所需要的配置文件缺失(...原创 2020-03-14 23:51:56 · 345 阅读 · 0 评论