本文详细介绍了HDFS中的Namenode和Datanode的工作职责及元数据管理机制。Namenode负责元数据管理，包括内存元数据、磁盘元数据镜像和操作日志。Datanode则存储用户文件块数据并定期向Namenode报告。文中还讨论了Namenode的元数据checkpoint过程以及Datanode的掉线判断时限和心跳间隔配置。
Namenode
1.Namenode工作职责：
负责客户端请求的响应，元数据的管理（查询，修改）
2.元数据管理 ： namenode对数据的管理采用了三种存储形式：内存元数据(NameSystem) 磁盘元数据镜像文件数据操作日志文件（可通过日志运算出元数据）
3.元数据存储机制：
A、内存中有一份完整的元数据(
内存meta data
)
B、磁盘有一个“准完整”的元数据镜像（
fsimage
）文件(在namenode的工作目录中)
C、用于衔接内存metadata和持久化元数据镜像fsimage之间的操作日志（
最低0.47元/天 解锁文章
扫一扫
863
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
