HDFS 架构概述
Hadoop Distributed File System ,简称 HDFS ,是一个分布式文件系统。1 ) NameNode ( nn ):存储文件的 元数据 ,如 文件名,文件目录结构,文件属性 (生成时间、副本数、文件权限),以及每个文件的 块列表 和 块所在2 ) DataNode(dn) :在本地文件系统 存储文件块数据 ,以及 块数据的校验和 。3 ) Secondary NameNode(2nn) : 每隔一段时间对 NameNode 元数据备份 。
YARN 架构概述、
Yet Another Resource Negotiator 简称 YARN ,另一种资源协调者,是 Hadoop 的资源管理器。1 ) ResourceManager ( RM ):整个集群资源(内存、 CPU 等)的老大3 ) ApplicationMaster ( AM ):单个任务运行的老大2 ) NodeManager ( N M ):单个节点服务器资源老大4 ) Container :容器,相当一台独立的服务器,里面封装了任务运行所需要的资源,