centos搭建hadoop完全分布式集群
参考链接:
1.完全分布式Hadoop集群在虚拟机CentOS7上搭建https://blog.csdn.net/weixin_41627032/article/details/103328922
2.搭建Hadoop的伪分布式集群 https://www.panziye.com/bigdata/287.html
我是创建了三台虚拟机搭建的hadoop集群 可能也不是真正意义上的完全分布式集群
三台虚拟机的静态ip为(参考个人情况)
(如何设置静态ip见前面的博客)
192.168.58.140(用作master节点)
192.168.58.141(用作slave1节点)
192.168.58.142(用作slave2节点)
修改主机名称
(三台主机都修改)
通过hostnamectl set-hostname 新主机名命令修改三台主机(虚拟机)的主机名,修改后通过hostname命令查看是否修改成功
以master为例:(此张截图来源于参考链接2)
输入vi /etc/hosts命令修改host文件(三台主机都改),加入主机的ip和主机名
重启三台主机 或者用xshell或者securtCRT重新链接后发现主机名称已改变
关闭防火墙
(三台都关闭虚拟机)
通过 firewall-cmd --state查看防火墙状态 running代表开启 not running代表关闭。
通过systemctl stop firewalld.service命令关闭防火墙
通过systemctl disable firewalld.service命令禁止防火墙开机启动
在参考博客中有一个步骤是永久关闭selinux