好程序员大数据独家解析-hadoop五大节点

本文详细介绍了Hadoop大数据系统中的五个关键节点:NameNode管理文件系统的元数据,DataNode负责数据的存储和检索,Secondary NameNode用于备份NameNode的元数据,ResourceManager全局调度集群资源,NodeManager监控节点资源使用。理解这些节点的功能对于掌握Hadoop至关重要。
摘要由CSDN通过智能技术生成

1.NameNode(管理节点)

    Namenode 管理着文件系统的命令空间(Namespace)。它维护着文件系统树以及文件树中所有的文件和文件夹的元数据(metadata)元数据包括编辑日志(edits)和镜像文件。管理这些信息的文件有两个,分别是Namespace 镜像文件(fsimage)和编辑日志文件,编辑日志主要是记录对hdfs进行的修改镜像文件主要是记录hdfs的文件树形结构这些信息被Cache在RAM中,当然,这两个文件也会被持久化存储在本地硬盘Namenode记录着每个文件中各个块所在的数据节点的位置信息,但是他并不持久化存储这些信息,因为这些信息会在系统启动时从数据节点重建。

 2.DataNode(工作节点)

     Datanode是文件系统的工作节点,他们根据

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值