Hadoop|hadoop伪分布式集群部署详细步骤

1 前提：j.k1.8 和ssh免密登录

ssh 免密登录:

切换到bduser用户

mkdir .ssh

ssh-keygen -t rsa

三次回车

cd .ssh

cat id_rsa.pub >> authorized_keys

chmod 700 .ssh

chmod 600 .ssh/*

然后试着登录一下主机 ssh bduser 可以登录成功的话就是配置好了

2 下载安装包 解压缩

rpm -ivh

3 修改主机名和IP映射

sudo vim /etc/hostname

sudo vim/etc/hosts

4 配置环境变量

vim ~/.bashrc

source ~/.bashrc

5 修改etc/hadoop/下的配置文件

vim core-site.xml

vim hdfs-site.xml

vim yarn-site.xml

vim hadoop-env.sh

bduser是用户名

vim slaves

5 格式化

hdfs namenode -format

6 启动服务

进入hadoop/sbin目录启动

./start-all.sh

7 jps 验证

8 webUI

http://192.168.56.131:9870(hadoop3 9870 hadoop2 50070)