1 初始化操作
bin/hdfs namenode -format
初始化作用:
1.会生成namenode的文件目录结构
in_use.lock是在使用的时候生成和
edits相关的也是在使用之后生成
2. 确定了三个id namespace cluster blockpool
namespaceID:是系统文件的唯一标识符,格式化文件系统之后会生成
clusterID :生成的集群的ID
blockpoolID:针对每一个namespace对应的blockpool的ID 包含储存节点IP等信息
3. 生成了fsimage_00000
只启动namenode
1. 会生成锁文件 in_use.lock
2. 会生成edits相关的文件,并且seen_txid会改变成和edits_inprogress文件后面的编号id一样
启动datanano
1. 会生成datanode文件目录
current文件和锁文件是一起生成的
2.会生成块池id对应的文件夹和VERSION文件
为什么会自动配对?
slaves文件规定hadoop集群的所有从节点的主机,默认值是localhost,所以伪分布式可以配对成功
hadoop的从节点类型不止一种
hdfs的从节点 datanode
yarn的从节点 nodemanager
为什么要这样设计?
3.三个配对id的位置
1.namespace BP…下面的current文件夹下的VERSION文件里面
2.blockpool BP…下面的current文件夹