记一次搭集群失败的坑(Ambari Delete Service)

本人用ambari 2.7.3 搭建集群。本来是一次性成功了。但是发现Namenode布在了dn的域名上,于是使用ambari的delete service选项,把所有安装的服务都卸载了。(还剩ZK,因为ambari要求必须至少一个服务,所以最后剩下zk没法delete掉)。

然后重新走集群安装向导,由伪分布式 -> 完全分布式。
安装完之后的最后一步,开始重新启动集群。发现dn无论如何也启动不起来。但是ambari这边却显示绿条(这意味着启动成功),所以我们要去看DN的日志。由于我们之前日志都默认配置在/foo1目录下,但是去这个目录下发现日志的修改时间都是昨天。一瞬间毫无头绪了。

后来看到ambari里配置的log dir换成了/foo2,这才知道昨天第二遍搭集群的时候配置填错了。所以去接下来去/foo2看log。

看到如下log:

这是因为datanode端的clusterID和NN的clusterID不一样,导致无法兼容而出现错误。这是因为昨天delete掉之前安装的hdfs,但是可能Datanode这里ambari没有处理的很好,还是留下了之前的一些文件。

解决方案:
修改namenode的VERSION中的clusterID,让其与Datanode一致。

storageID=DS-884ee86c-f8d7-463b-8f5d-5d368e86d781
clusterID=CID-d4fc810c-aa11-4924-8a27-2788ed84a92e
cTime=0
datanodeUuid=bdbf38e2-a46c-4d88-a4c8-9e772b17a62f
storageType=DATA_NODE
layoutVersion=-57

这个问题是顺利解决了。

但是和同事对NN、JN数据文件夹配置的时候,发现配置错了,遂修改成正确目录。但是此时nn启动不了了。日志里是如下错误:

此log说明JN还没格式化,于是到nn节点上运行:

hdfs namenode -initializeSharedEdits

最终集群终于成功启动了。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

叹了口丶气

觉得有收获就支持一下吧~

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值