m0_73646557的博客

原创 Hadoop自学笔记1

Hadoop 2.x ：Common（辅助工具）、HDFS（数据存储）、MapReduce（计算）、Yarn（资源调度）Hadoop 1.x ：Common（辅助工具）、HDFS（数据存储）、MapReduce（计算+资源调度）Container：相当于一台独立的服务器，封装任务运行所需要的资源，如内存、CPU、磁盘、网络等。两个阶段：Map（处理输入数据）和Reduce（对Map结果进行汇总）ResonanceManager（RM）：管理整个集群资源（内存、CPU等）NameNode（nn）：存储文件。