hadoop环境新手安装教程

1、资源准备：

（1）jdk安装包：我的是1.8.0_202

（2）hadoop安装包：我的是hadoop-3.3.1

注意这里不要下载成下面这个安装包了，我就一开始下载错了

错误示例：

 

2、主机网络相关参数准备

这里主要涉及hostname改写、hosts修改和ip地址改写

（1）修改hostname。这里我用了3台虚拟机，1台改为master，另外2台分别改为node1和node2

cd /etc/   // 进入配置目录
 
vi hostname  // 编程hostname 配置文件

 

 

 （2）修改hosts。这里根据每台虚机的ip选择相应的hostname就行

vi /etc/hosts

（3）IP地址改写，这里需要修改虚机的配置，选择NAT模式，DHCP选择想要的网段就行。

注意：以上的操作需要在每台虚机上分别执行 ！！！

 3、配置ssh免密登陆

这一步在master主机上操作，一直按回车：

 ssh-keygen 

会生成以下4个文件:

  

之后使用以下命令将密钥分发到node1和node2:

ssh-copy-id root@node1
ssh-copy-id root@localhost
ssh-copy-id root@node2

成功后就应该能免密登陆node1和node2了：

4、配置java环境

我将jdk安装包和hadoop安装包都放在master主机/opt