大数据学习笔记——基于 Linux CentOS 7 的 Hadoop 3.1.2 环境搭建（六）

1.NameNode 和 SecondaryNameNode分开配置步骤
1.masters 文件的作用：masters设置的是运行SecondaryNameNode的节点可以在masters里面设置多个节点来运行SecondaryNameNode
1.需要在 etc/hadoop 目录中手工添加 masters 文件
2.修改 hdfs-site.xml 加入：
<property> <name>dfs.namenode.secondary.http-address</name> <value>SecondaryNameNodeHost:9868</value> <description> 改为SecondaryNameNode主机名或ip地址，2.x 端口为50090；3.0改为9868 如果SecondaryNameNode为多个话可以设置为0.0.0.0:9868 </description> </property>
3.修改 core-site.xml 加入：
<property> <name>fs.checkpoint.period</name>?? <value>3600</value> <description>定义备份NN的间隔时间，秒为单位，只对SNN效，默认一小时 </description> </property> <property>?? <name>fs.checkpoint.size</name> <value>67108864</value> <description> 以日志大小间隔做备份间隔，只对SNN生效，默认64M，字节为单位 </description> </property>
4.模拟namenode宕机
1.kill掉namenode进程，将hadoop.tmp.dir目录下的数据删除掉。模拟master宕机。
2.准备原来机器一样的机器，包括配置和文件
3.创建一个空的文件夹，该文件夹就是配置文件中dfs.name.dir所指向的文件夹。
4.拷贝SecondaryNameNode checkpoint出来的文件，到某个文件夹，该文件夹为fs.checkpoint.dir指向的文件夹（例如：/home/icss/clusterdir/tmp/dfs/namesecondary）
5.执行命令bin/hadoop namenode –importCheckpoint
缺陷：但是如果dfs.name.dir已经包含合法的 fsimage，会导致执行失败。因为NameNode会检查fs.checkpoint.dir目录下镜像的一致性，但是不会去改动它。