yarn
叫我小蟹
这个作者很懒,什么都没留下…
展开
-
hadoop组成之---Yarn
Yarn是分布式资源调度和任务监控平台,是用来合理分配网络、磁盘IO、内存、CPU资源的。每台机器的上的资源都是有限的,而且不尽相同,人们不能实时监控资源占用情况,会产生节点未合理利用的情况。 此时,需要一个平台来实时监控每台机器的匀速资源,然后进行合理的任务分配;同时,还要做任务的进度监控工作,当前工作不能完成现在分配的任务时,平台会进行任务的再分配。 ...原创 2020-08-20 22:41:26 · 115 阅读 · 0 评论 -
分布式资源调度和任务监控平台yarn之--yarn的配置
配置yarn(所有操作都在hadoop安装目录下进行;qi’dogn’zhi) 1、cd /opt/apps/hadoop-3.2.1/etc/hadoop/ 目录下有一个yarn-site.xml,打开编辑模式 2、yarn-site.xml中,增加编辑如下: ```java <configuration> <!-- Site specific YARN configuration properties --> <!-- resource,manager主节点所在机器原创 2020-08-20 11:41:14 · 611 阅读 · 0 评论