设置主机名:vi /etc/hostname 注意:需要重启 reboot
设置映射:vi /etc/hosts
设置免密登录:ssh-keygen
ssh-copy-id hd-01 ...
配置环境变量:vi /etc/profile 注意:需要source /etc/profile
修改 hadoop-env.sh :vi /root/hd/hadoop-2.8.4/etc/hadoop/hadoop-env.sh
export JAVA_HOME=/root/hd/jdk1.8.0_141
修改配置文件 core-site.xml
hdfs-site.xml
mapred-site.xml
yarn-site.xml
修改slaves文件加入从节点
格式化namenode :hdfs namenode -format
启动:start-all.sh
附:
分发jdk命令 : scp jdk hd-02:/root/hd scp /etc/profile hd-02:/etc/ source /etc/profile
scp -r...
解压hadoop命令 :tar -zxvf .tar.gz
解压JDK命令 :tar -zxvf jdk-8u181-linux-x64.tar.gz -C /opt/moudle
JAVA_HOME和HADOOP_HOME环境变量配置:
export JAVA_HOME=/root/hd/jdk1.8.0_141
export PATH=$PATH:$JAVA_HOME/bin
export HADOOP_HOME=/root/hd/hadoop-2.8.4
export PATH=$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$PATH
解决hadoop集群环境datanode无法启动的问题:https://blog.csdn.net/rumple/article/details/77686657