hadoop HA遇到的问题

 

hdfs namenode -bootstrapStandby

命令作用：将active namenode的 {dfs.namenode.name.dir} 目录的内容复制到 standby namenode的{dfs.namenode.name.dir} 目录下

在备namenode上执行hdfs namenode -bootstrapStandby命令同步主namenode的元数据时报如下错误

错误显示说无法从master获取namespace信息，因为连接不上。

我的错误原因是因为只是在master上初始化了namenode而没有启动master上的namenode。因此启动master上的namenode后问题解决。

 

主备节点不能正常实现故障切换

虽然主备namenode都启动了，但是手动kill主节点后，备节点不会由standby变为active。并且当再次启动刚才关闭的主namenode后，发现两个namenode都是standby状态。

查看hadoop-root-zkfc-master.log发现如下问题

错误显示说未找到fuser命令，fencing不成功，无法通过配置的方式进行fence。

出现这些错误的原因是因为服务器安装的是centos最小化版本，最小化安装时并没有fuser，而在配置fence方法时只配置了sshfence，也就是采用fuser命令来杀死要隔离的namenode。因此在两个namenode节点上执行命令yum install psmisc进行安装，之后即可正常切换主备节点。