YARN
XQ_WYL
这个作者很懒,什么都没留下…
展开
-
大数据入门之Hadoop生态系统(5) -- YARN概念
1.YARN概述YARN 是一种新的 Hadoop 资源管理器,它是一个通用资源管理系统,可为上层应用提供统一的资源管理和调度,它的引入为集群在利用率、资源统一管理和数据共享等方面带来了巨大好处。通俗来说:不同计算框架可以共享同一个HDFS集群上的数据,享受整体的资源调度。2.YARN的架构以及执行流程(1)ResourceManager(简称RM):整个集群同一时间提供服务的RM...原创 2018-08-20 00:00:00 · 371 阅读 · 0 评论 -
大数据入门之Hadoop生态系统(6) -- YARN环境搭建
1.前置要求Windows用户:VMware虚拟机 Centos6.4。(要求主机和虚拟机能够相互通信,具体请查看网上教程)Linux、Mac用户:可以直接在本地搭建环境。JDK1.8(具体的安装步骤,网上都有很多,注意我们所有的东西都是安装在虚拟机上的,注意配置到系统环境变量中)hadoop-2.6.0-cdh5.7.0(具体部署步骤,请移步大数据入门之Hadoop生态系统(3)...原创 2018-08-20 10:42:16 · 476 阅读 · 0 评论