![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop学习笔记
文章平均质量分 94
小黄鸭and小黑鸭
小黄鸭的快乐生活 嘻嘻(●'◡'●)
展开
-
Hadoop简介
Hadoop的架构 在其核心,Hadoop主要有两个层次,即: 加工/计算层(MapReduce) 存储层(Hadoop分布式文件系统) 除了上面提到的两个核心组件,Hadoop的框架还包括以下两个模块: Hadoop通用:这是Java库和其他Hadoop组件所需的实用工具 Hadoop YARN :这是作业调度和集群资源管理的框架 Hadoop Streaming 是一个实用程...原创 2018-09-04 18:20:00 · 8633 阅读 · 0 评论 -
Hadoop YARN
基本思想 教程: https://mp.weixin.qq.com/s/JEw7qCze2vlt9ys_Fe7cFA YARN(Yet Another Resource Negotiator)是一个分布式资源管理框架,基本思想是将资源管理和作业调度/监视的功能分解为单独的守护进程。一个全局ResourceManager(RM)和每个应用程序ApplicationMaster(AM),应用程序...原创 2018-09-04 18:21:13 · 259 阅读 · 0 评论