Ambari平台添加节点
一、安装
1.1 环境准备
- 服务器系统安装;
- 服务器环境配置;
1.2 Jdk安装
- 下载并安装jdk(注意jva版本和Ambari版本的对应)
安装方式:下载安装包jdk-8u162-linux-x64.tar.gz后本地安装 - 创建java目录
mkdir /usr/java
将压缩包移动到新建目录
mv xx/xx/jdk-8u162-linux-x64.tar.gz /usr/java
解压文件
tar -zxvf jdk-8u162-linux-x64.tar.gz
- 配置环境变量
vim /etc/profile
export JAVA_HOME=/usr/java/jdk1.8.0_162
export CLASSPATH=.:$JAVA_HOME/lib:$JRE_HOME/lib
export PATH=$JAVA_HOME/bin:$PATH
- 使配置生效:
source /etc/profile
java -version
切换到任意路径执行java 命令,确认java环境配置成共
java -version
注意:如果Ambari启用了Kerberos认证,还需要安装JCE
1.3 在/etc/yum.repos.d目录下添加repo文件
1.4 主机名配置
在Armbari Server服务器添加新增节点的域名解析
vim /etc/hosts
xxx.xxx.xxx.xx hadoop-6
1.5 IP地址和域名设置
涉及的配置文件:
/etc/hostname
/etc/sysconfig/network
/etc/sysconfig/network-scripts/ifcfg-eth0
1.6 系统文件句柄数设置
查询当前句柄数:ulimit -a
永久设置:
vim /etc/security/limits.conf
修改结果示例如下
* - nofile 100000
* soft nofile 100000
* hard nofile 100000
* soft nproc 65535
* hard nproc 65535
1.7 设置服务器之间的SSH互信
① 拷贝秘钥文件到新增节点服务器:
各节点删除.ssh目录并重新赋权
rm -rf /root/.ssh
mkdir -m 700 /root/.ssh
scp /root/.ssh/id_rsa.pub root@hadoop-6:/root/.ssh
② 在hadoop-6节点创建认证文件:
cat /root/.ssh/id_rsa.pub >> /root/.ssh/authorized_keys
③ 验证
ssh hadoop-6
exit
主服务器秘钥生成命令:
ssh-keygen
cat /root/.ssh/id_rsa.pub >> /root/.ssh/authorized_keys
chmod 700 /root/.ssh
chmod 600 /root/.ssh/authorized_keys
1.8 安装和配置NTP时钟服务
资料:https://www.tecmint.com/install-ntp-server-in-centos/
安装NTP服务
yum install ntp
① 设置服务器时钟对齐服务器:vim /etc/ntp.conf
server xxx.xx.xx.xx prefer
fudge xxx.xx.xx.xx stratum 9
② 创建ntp.drift并赋权
mkdir /var/lib/ntp/ntp.drift
chmod 666 /var/lib/ntp/ntp.drift
③ 注册启动服务
systemctl enable ntpd
systemctl start ntpd
④ 查看服务状态
ntpq -p
1.9 关闭防火墙
systemctl disable firewalld
systemctl stop firewalld
关闭SELinux
setenforce 0
设置用户创建文件的默认权限
umask 0022
永久生效 echo umask 0022 >> /etc/profile
二、Ambari平台添加节点
进入Ambari平台,选择Hosts -> Actions -> Add New Hosts
进入新节点添加界面,按照指示操作即可。
添加权限的域名和ssh key
Target Hosts: xxx.xxx.xx
Host Registration Information: id_rsa
Register and Confirm
Confirm Hosts
安装Ambari-agent
检查安装过程中的问题
Assign Slaves and Clients
将从属组件和客户端组件分配给要在其上运行它们的主机。
分配了主组件的主机显示为✵。
“Client”将安装HDFS Client,YARN Client,MapReduce2 Client,HBase Client,ZooKeeper Client和Infra Solr Client。
Configurations
选择添加的主机所属的配置组。
Review
请在安装前查看配置
Install, Start and Test
请等待所选服务的安装和启动。