Hadoop 配置集群的步骤

Hadoop 配置集群的步骤

1.创建虚拟机

2.ping通IP地址

https://blog.csdn.net/weixin_41736752/article/details/101098955

3.上传hadoop jdk

https://blog.csdn.net/weixin_41736752/article/details/101306967

4.修改环境变量

etc/profile

JAVA_HOME=/home/bigdata/jdk1.8.0_101
CLASSPATH=.:$JAVA_HOME/lib.tools.jar
HADOOP_HOME=/home/bigdata/hadoop-2.7.1
PATH=$JAVA_HOME/bin:$PATH:$HADOOP_HOME/bin:$HADOOP_HOME/sbin:
export JAVA_HOME CLASSPATH HADOOP_HOME PATH

修改hosts文件

/etc/hosts
ip 空格 主机名
ip 空格 主机名
ip 空格 主机名
#

5.ssh免密

ssh-keygen -t rsa
ssh-copy-id 主机名
ssh-copy-id 主机名2
ssh-copy-id 主机名3
ssh 子机名

6.传给另外几台虚拟机

scp -r 文件(夹)地址 从机name：地址

7.传送环境变量文件

8.格式化集群

hadoop namenode -format

9.启动集群

start-all.sh

(5个）

10.查看节点

jps

（关闭）

stop-all.sh