![](https://img-blog.csdnimg.cn/20201014180756927.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hadoop学习笔记
文章平均质量分 94
小黄鸭and小黑鸭
小黄鸭的快乐生活 嘻嘻(●'◡'●)
展开
-
Hadoop简介
Hadoop的架构在其核心,Hadoop主要有两个层次,即:加工/计算层(MapReduce)存储层(Hadoop分布式文件系统)除了上面提到的两个核心组件,Hadoop的框架还包括以下两个模块:Hadoop通用:这是Java库和其他Hadoop组件所需的实用工具Hadoop YARN :这是作业调度和集群资源管理的框架Hadoop Streaming 是一个实用程...原创 2018-09-04 18:20:00 · 8633 阅读 · 0 评论 -
Hadoop YARN
基本思想教程: https://mp.weixin.qq.com/s/JEw7qCze2vlt9ys_Fe7cFAYARN(Yet Another Resource Negotiator)是一个分布式资源管理框架,基本思想是将资源管理和作业调度/监视的功能分解为单独的守护进程。一个全局ResourceManager(RM)和每个应用程序ApplicationMaster(AM),应用程序...原创 2018-09-04 18:21:13 · 261 阅读 · 0 评论