CentOS7配置 Hadoop完全分布式搭建心得

①CentOS7自带的jdk需要删除,然后自行配置,期间还遇到了一点乌龙:

CentOS7安装java却无法运行:java: cannot execute binary file-CSDN博客


②vmware查看网络配置:编辑-虚拟网络编辑器-DHCP设置


③在克隆虚拟机前一定要做好hadoop配置文件修改!因为我hdfs-site.xml中有一个主机域名写错了,导致后面发现在格式化format的时候找不到主机,

就发现做错了,随后只更改了第一个虚拟机的文件,而又忘了改另外两个虚拟机的相关配置文件,进而又导致在hadoop023那里jps怎么也不出来SecondaryNameNode,

网上找了一堆解决方案都不管用,后来才想起来好像其余两个虚拟机也要改,

改完再重新格式化并启动服务就做好了!

④还碰到了找不到DataNode的问题,

感觉csdn有些方法里面太复杂了,我单单删除所有namenode中的VERSION并不管用,索性删除了dfs文件夹,然后重新格式化一步到位哈哈哈


⑤尽量一遍做完,不要让配置文件出错,不然后面重复格式化会很麻烦

windows hadoop 格式化失败_mob649e816ab022的技术博客_51CTO博客

参考文章:

大数据之hadoop启动失败问题集锦_hadoop无法启动-CSDN博客

卸载centos7自带的jdk的操作步骤_centos7卸载jdk-CSDN博客

虚拟机centos7配置Hadoop单节点伪分布配置教程_hadoop在虚拟机配置伪分布式-CSDN博客

在CentOS7 Hadoop完全分布式搭建_哔哩哔哩_bilibili

ps:算是复习了一下shell和linux,我用的是jdk-8u391-linux-x64,Hadoop-3.3.6

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值