namenode和secondary namenode之间的联系和区别

这里写图片描述
1、namenode是存储客户端想hdfs发送增删改查的要求的元数据的。
2、secondary namenode是存储namenode的元数据的,防止namenode宕机产生的数据丢失。
3、一条元数据打大小是150byte,namenode的存储空间大约是128G,secondary namenode的内存会稍微大一些。
4、因为这样的内存机制,所以hdfs不适合存储大量小数据,使用效率较低。

a、内存中有一份完整的元数据(内存meta data)
b、磁盘中有一份完整的元数据镜像(fsimage)文件(在namenode的工作目录中)
c、用于衔接内存meta data和持久化元数据镜像fsimage之间的操作日志(edits文件)

5、每隔一段时间,secondary namenode将namenode上积累的edits(日志文件)和一个最新的fsimage下载到本地,并加载骚内存进行merge(这个是checkpoint)
6、要是namenode挂了,secondary namenode是不能够当作namenode进行使用的,因为secondary namenode中没有元数据更新机制。
7、因为namenode和secondary namenode之间的信息交换不是实时的,所以在namenode宕机的时候也会有数据丢失,不过可以修复大量的数据。

  • 1
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值