- 博客(2)
- 收藏
- 关注
RSS订阅转载 Yarn资源调度器入门学习
调度器scheduler是yarn中重要角色之一，它负责分配container资源给application，有如下三种调度器可供配置选择，分别是FIFO Scheduler，Capacity Scheduler和Fair Scheduler，可以通过yarn-site.xml配置自己的调度器。FIFO SchedulerFIFO调度器使比较low的一种调度器，它遵循先进先出的原则，即...
2019-10-07 23:53:00
659
转载 MapReduce提交job到Yarn的流程学习
以MapReduce为例，提交一个MapReduce application的大致流程如下，其中Resource Manager简写为RM，Node Manager简写为NM，Application Master简写为AM。提交application大致流程（1）首先client里执行一个MapReduce程序，这个程序运行在client端的JVM里，在main方法中最后有一个job...
2019-10-07 23:45:00
693
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人