本文详细介绍了HDFS中NameNode、SecondaryNameNode和DataNode的功能。NameNode负责元数据管理，接受客户端读写请求；SecondaryNameNode协助合并edits日志，减少NameNode启动时间；DataNode存储数据块并定期向NameNode报告其状态。NameNode的元数据包括文件权限、块信息等，而块位置信息仅在内存中存储。SecondaryNameNode在设定的时间间隔或edits文件大小达到阈值时执行合并。DataNode在不同机架上存储副本以确保数据安全和传输效率。
HDFS中三种节点的功能：
一、NameNode（NN）
-- NameNode主要功能：接受客户端的读写服务
-- NameNode保存元数据（metadata）信息，主要包括
（1）文件拥有者和权限
（2）文件包含哪些块
（3）每个块保存在哪个DataNode上（由DataNode启动时上报）
解释：每个块保存在哪个DataNode上，这个信息不会保存在NameNode磁盘上，而是当HDFS系统启动时，DataNode会将此信息上报给NameNode，由NameNode保存在内存中，并且每隔一段时间都会重新上报一次。
-- NameNode的元数据信息在启动后会加载到内存
（1）元数据存储到磁盘文件名为fsimage文件中
（2）块的位置信息不会保存到fsimage文件中
（3）edits文件
最低0.47元/天 解锁文章
扫一扫
1521
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
