hadoop配置虚拟机集群环境

目录

修改主机名和配置固定IP

修改主机名​

         设置固定IP

        修改内容​

        IP设定：​

 关闭防火墙和设置安装目录

关闭防火墙

 新建安装目录​

 安装配置JDK

下载jdk包

 WinSCP上传安装包​

解压安装包

配置JDK环境变量​编辑

 克隆虚拟机和配置主机IP映射

克隆虚拟机

配置主机IP映射

        1.修改hosts文件​

         2.使用ping测试拼通​

配置集群各节点的免密登录​

生成密钥

将自身公钥信息复制并追加到全部的节点的授权文件​

测试SSH免密登录​

---

修改主机名和配置固定IP

修改主机名

查看：hostname

修改文件：vim /etc/hostname

重启：reboot

 

 

 设置固定IP

查看本机网卡配置与网络状态：ifconfig

 修改网卡配置文件: vim /etc/sysconfig/network-scripts/ifcfg-ens33

修改内容

BOOTPROTO=static  #静态static 动态dhcp
ONBOOT=yes        #开机启用本配置
IPADDR=192.168.112.200   #IP地址
NETMASK=255.255.255.0    #子网掩码
GATEWAY=192.168.112.2 #网关(最后一位2)
DNS1=8.8.8.8          #谷歌   

IP设定：

 编辑->虚拟网络编辑器->NAT模式->DHCP设置

IP设定在起始IP地址和结束IP地址之间

重启网络服务：service network restart

拼通主机：ping 192.168.112.200

拼通百度：ping www.baidu.com

 关闭防火墙和设置安装目录

关闭防火墙

查看防火墙状态：firewall-cmd - -state 或者 systemctl status firewalld.service

关闭防火墙：

systemctl stop firewalld.service

禁止防火墙开机启动：

systemctl disable firewalld.service

重启防火墙命令：

systemctl start direwalld.service

设置防火墙开机启动：

systemctl enable direwalld.service

 新建安装目录

在文件系统CentOS中目录“/opt”常用于存放第三方软件包和数据文件

mkdir /opt/packages 安装包

mkdir /opt/programs 安装后的程序文件

 安装配置JDK

下载jdk包

https://www.oracle.com/java/technologies/javase/javase8u211-later-archive-downloads.html

卸载预装的OpenJDK

查看：rpm -qa|grep openjdk

卸载：rpm -e --nodeps <名字>

 WinSCP上传安装包

解决方法：协议改SCP，用户名改为root

 

 

解压安装包

tar -zxvf jdk-8u211-linux-x64.tar.gz -C /opt/programs

配置JDK环境变量

vim /etc/profile

在文件末尾加入：

export JAVA_HOME=/opt/programs/jdk.1.8.0_211
export PATH=$PATH:$JAVA_HOME/bin

刷新profile文件：source /etc/profile

检测JDK版本：Java -version

 克隆虚拟机和配置主机IP映射

克隆虚拟机

 

改host01和host02的主机名和IP地址

配置主机IP映射

依次启动三个节点host01,host02,host03

1.修改hosts文件

vim /etc/hosts

 在三个节点分别插入：

192.168.112.200 host01
192.168.112.201 host02
192.168.112.202 host03

 2.使用ping测试拼通

在三个节点执行

ping host01
ping host02
ping host03

 

配置集群各节点的免密登录

生成密钥

分别在三个节点执行 ssh-keygen

输入三次enter

 

 

将自身公钥信息复制并追加到全部的节点的授权文件

#分别在三个节点
ssh-copy-id host01
ssh-copy-id host02
ssh-copy-id host02

 确认连接yes，输入用户密码

测试SSH免密登录

#分别在三个节点
ssh host01
ssh host02
ssh host03