一:虚拟机分配
主机名 | ip | 进程 |
---|---|---|
hadoop1 | 192.168.2.160 | jdk hadoop namenode ressourcemanager |
hadoop2 | 192.168.2.161 | jdk hadoop datanode secondnamenode |
hadoop3 | 192.168.2.162 | jdk hadoop datanade |
二:免密钥登陆
2.1 关闭防火墙
systemctl stop firewalld.service
2.2 关闭开机启动
systemctl disable firewalld.service
2.3免密码登录:
cd /root/.ssh/
ssh-keygen -t rsa
一直回车就会生成一个公钥和一个私钥
将公钥拷贝到其它机器上,实现免密码登录
ssh-copy-id hadoop1
ssh-copy-id hadoop2
ssh-copy-id hadoop3
三:下载jdk和hadoop
下载jdk1.8到/usr/local/ 目录下 并解压
如图将jdk1.8.0_181 为解压后的jdk目录 hadoop为解压后修改的目录
四:配置jdk环境变量
vim /etc/profile
如图在末尾添加jdk的环境变量。
source /etc/profile 让修改立即生效
注意:三台虚拟机都要配置
五:配置hadoop
cd /usr/local/hadoop/etc/hadoop
1 vim hadoop-env.sh
2 vim core-site.xml
3 vim hdfs-site.xml
4 mv mapred-site.xml.template mapred-site.xml
5 vim mapred-site.xml
6 vim yarn-site.xml
7 vim slaves
8 touch masters
9 vim masters
六 拷贝文件到其他虚拟机
cd /usr/local/hadoop/
mkdir name
mkdir tmp
mkdir data
scp -r /usr/local/hadoop hadoop2:/usr/local/
scp -r /usr/local/hadoop hadoop3:/usr/local/
七 格式化hadoop
第一次启动格式化
看到红线说明格式化成功
八 启动hdfs和yarn
九 JPS查看进程
十 访问页面
能看到这些页面表示已经搭建成功