yarn
q495673918
这个作者很懒,什么都没留下…
展开
-
yarn设置应用优先级
LOW VERY_LOW NORMAL(默认) HIGH VERY_HIGH。设置全局最大优先级,默认的是0,要想使用必须放开此限制。设置队列的默认优先级。原创 2022-08-26 17:45:14 · 1743 阅读 · 0 评论 -
yarn资源配置及使用
理想情况下,应用提交到yarn上立马就可以获得资源执行任务,但是现实情况资源往往是有限的,任务执行的先后及获得资源的多少,yarn给我们提供了多种调度器和配置策略供我们选择。适合多个组织共享整个集群,每个组织分配专门的队列,然后每个队列分配一定的资源。资源按百分比进行分配成多个队列,且队列资源可以设置弹性,在队列资源不够的时候可以使用其他队列资源,其他队列有任务的时候会在本队列任务执行完成释放资源还给其他队列。在队列内部,资源调度采用先进先出(FIFO)策略。......原创 2022-08-11 12:18:06 · 2912 阅读 · 0 评论 -
yarn命令
查看指定attempt所申请创建的containers。查看container的某个日志文件的具体内容。查看application的attempts。查询指定的applicaiton集合。查看container的日志列表。原创 2022-08-09 17:15:03 · 189 阅读 · 0 评论