NameNode
保存元数据MetaData,fsimage(磁盘元数据副本),edits(日志)。当NameNode启动后,会将磁盘上的数据fsimage同步一份到内存中,同时DataNode启动会将block的信息也存入内存中,或者在文件上传时会将元数据写入内存中,此时,内存中的数据的实时性都高于fsimage。当文件开始上传后会在edits中记录日志,而不会记录于磁盘的fsimage。
SecendNameNode
协助NameNode将edits(日志)合并到磁盘的fsimage中,当edits到了合并的时候(两个时机,默认,一个是固定的时间,默认3600秒,一个是固定的容量,edits默认只有64m当存满了就会触发),触发后SecendNameNode就会将edits数据清空并将内容存入fsimage中。
默认的两个key
fs.checkpoint.period = 3600
fs.checkpoint.check = 64MB
DataNode
数据存储节点,一般有多个节点,存放当前文件的block的副本