按照网上教程搭建好Hadoop以及Spark集群后,最开始都可以正常显示,但是有一台节点后面系统重装,再搭建过程出现问题,localhost:50070始终无法看到DataNode信息,找了很多教程试了几种方法没有解决,Spark集群的显示是正常的
最后发现在Hadoop format以及启动关闭过程中/usr/local/hadoop/dfs
目录下生成data文件,网上说里面的version
文件中信息需要修改,改了也没有成功,最后想到反正都是自动生成的,可能在格式化过程中出现了问题,原有版本和新版本出现冲突,最后索性直接把这个目录下的文件删除,又把/usr/local/hadoop/tmp
重生成的文件都删除
接着启动,还是不行,最后想到是不是不只得删master
中的还得删除节点的,于是把所有节点的对应文件都删除,再次启动
完美运行
Spark集群搭建--节点DataNode网页无显示
最新推荐文章于 2022-10-14 17:07:22 发布