【Checkpoint】HA模式下checkpoint流程

在这里插入图片描述

journalnode的作用

两个NameNode为了数据同步,会通过一组称作JournalNodes的独立进程进行相互通信。active namenode存储edits到journalnode, standby namenode到journalnode读取edits文件用于checkpoint。

checkpoint过程

详细过程如下: (standby namenode=SbNN, activenamenode=ANN)

  1. SBNN查看是否满足创建检查点的条件:
    (1) 距离上次checkpoint的时间间隔 >= d f s . n a m e n o d e . c h e c k p o i n t . p e r i o d ( 2 ) E d i t s 中 的 事 务 条 数 达 到 {dfs.namenode.checkpoint.period} (2) Edits中的事务条数达到 dfs.namenode.checkpoint.period2Edits{dfs.namenode.checkpoint.txns}限制
    这两个条件任何一个被满足了,就触发一次检查点创建。
  2. SbNN将内存中当前的状态保存成一个新的文件,命名为fsimage.ckpt_txid。其中txid是最后一个edit中的最后一条事务的ID(transaction ID)。然后为该fsimage文件创建一个MD5文件,并将fsimage文件重命名为fsimage_txid。
  3. SbNN向active namenode发送一条HTTP GET请求。请求中包含了SbNN的域名,端口以及新fsimage的txid。
  4. ANN收到请求后,用获取到的信息反过来向SbNN再发送一条HTTP GET请求,获取新的fsimage文件。这个新的fsimage文件传输到ANN上后,也是先命名为fsimage.ckpt_txid,并为它创建一个MD5文件。然后再改名为fsimage_txid。fsimage过程完成。
  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值