hadoop3.0的全分布式搭建折腾了好久,因为网上基本上都是2.x的搭建教程,期间有好几个坑比较难弄,不过最后还是都解决了,下面简要记录笔者的搭建过程,以及遇到的坑。
搭建环境:CentOS7+hadoop3.0.3+jdk8
集群配置:1台主节点+3台子节点
主节点:hadoop1
子节点:hadoop2 hadoop3 hadoop4
前提准备
- 安装scp服务
- 安装配置jdk
- 配置静态ip地址
vi /etc/sysconfig/network-scripts/ifcfg-ens33
service network restart
ipconfig
- 修改主机名
vi /etc/sysconfig/network
添加:
NETWORKING=yes
HOSTNAME=XXX - 配置主机名和ip地址映射
vi /etc/hosts
- 关闭防火墙,设置开机不自启动
systemct