HDFS的NameNode功能

NameNode主要功能:

1、NameNode主要功能:接受客户端的读写服务

2、NameNode保存metadata信息:

      - 文件owership和permissions

      - 文件包含哪些块

      - Block保存在那个DataNode上(DameNode启动的时候主动把block汇报给NameNode)。

3、NameNode的metadata信息会在启动后加载到内存中:

      - metadata存储到磁盘文件名为"fsimage"(做持久化操作,存储文件owership和permissions和文件包含哪些块)

      - Block的位置信息不会保存到fimage

      - edits(日志)记录对metadata的操作日志中 (在持久化操作的间隔中使用的)

SecondaryNameNode(hadoop1.0版本存在)介绍:

1、它不是NameNode的备份(但可以做备份),它的主要工作时帮助NameNode合并edits日志和fimage,

      减少NameNode启动时间。

 2、SNN执行合并时机

      - 根据配置文件设置的时间间隔 fs.checkpoint.period 默认3600秒。

      - 根据配置文件设置edits日志大小 fs.checkpoint.size 规定edits文件的最大默认值64MB。

DataNode介绍:

1、存储数据(block)

2、启动DataNode线程的时候会向NameNode汇报block信息。

3、通过向NameNode发送心跳保持与其联系(3秒一次),如果NameNode10分钟没有收到DataName的心跳,

     则认为其已经lost,并copy其上的block到其他DataName上。

 

  • 2
    点赞
  • 8
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值