【若泽大数据实战第十一天】HDFS启动过程详解

本文详细介绍了HDFS启动过程中Namenode和Datanode的角色,包括首次启动和后续启动的步骤。重点讲解了Namenode如何加载fsimage和editlog,以及SecondaryNameNode的作用——合并fsimage和editlog以防止editlog过大。同时阐述了安全模式的概念,即在datanodes启动完成前的阶段,仅允许读取操作。
摘要由CSDN通过智能技术生成

前言:

整理HDFS整个启动的详细过程

Namenode保存文件系统元数据镜像,namenode在内存及磁盘(fsimage和editslog)上分别存在一份元数据镜像文件,内存中元数据镜像保证了hdfs文件系统文件访问效率,磁盘上的元数据镜像保证了hdfs文件系统的安全性。

namenode在磁盘上的两类文件组成:

fsimage文件:保存文件系统至上次checkpoint为止目录和文件元数据。

edits文件:保存文件系统从上次checkpoint起对hdfs的所有操作记录日志信息。

fsimage和editlog文件可以在本地文件系统看到,如下图:


首次安装格式化(format)主要作

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值