hadoop安装

配置Hadoop（保姆级教程）

一、准备工作

• 三台虚拟机
  • master
  • dy1
  • dy2

1、修改主机名

hostnamectl set-hostname (主机名)

2、添加ip地址与主机名的映射

vim /etc/hosts

添加配置如下
例:(虚拟机ip+主机名)
192.136.132.68 master
192.136.132.69 dy1
192.136.132.70 dy2

3、测试通过主机名是否能ping通

ping dy1
ping dy2

二、设置免密登录

1、执行命令

ssh-keygen -b 1024 -t rsa

弹出来的命令一路回车

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-z4Q67SkP-1649008758807)(hadoop操作.assets/image-20220404012237104.png)]

2、返回根目录

cd

3、查看文件(包含隐藏文件)

ls -all

4、打开.ssh文件夹

cd .ssh

5、copy公钥

ssh-copy-id dy1
ssh-copy-id dy2

注意：把公钥复制过去后需要修改权限

chmod 600 authorized_keys

三、配置JDK（本人用的是11）

1、配置JDK环境变量

vim /etc/profile

2、添加如下配置

export JAVA_HOME=（你安装的jdk路径）
export JRE_HOME=$JAVA_HOME
export CLASSPATH=.:$JAVA_HOME/lib
export PATH=$JAVA_HOME/bin:$PATH

3、更新profile文件

source /etc/profile

4、验证Java是否配置成功

java -version

四、配置hadoop

1、修改hadoop-env.sh

添加JDK环境变量