本博客是参考学习一下博客的文章,将整个知识点整合放在一起方便各位学习,非常感谢原创博主。
参考博客:
辅以
:《hadoop中NameNode、DataNode、Secondary、NameNode、ResourceManager、NodeManager 介绍》
HDFS总体架构
HDFS 采用Master/Slave的架构来存储数据,这种架构主要由四个部分组成,分别为HDFS Client、NameNode、DataNode和Secondary NameNode。一个HDFS集群是由一个NameNode和一定数目的DataNode组成的。NameNode是一个中心服务器,负责管理文件系统的名字空间 (Namespace )及客户端对文件的访问。集群中的DataNode一般是一个节点运行一个DataNode进程,负责管理它所在节点上的存储。
HDFS架构解析
(1)client
可能会有人有疑问,什么是client,Client是不是就是每位开发人员的电脑?是不是每个作业提交所在节点的机器,是不是....等?很多疑惑。基于此,我来给大家解答迷惑。