1 主机列表
本次实验共4台主机,1台作为Ambari Server主机,3台作为Ambari Agent
节点ip | OS版本 | jdk版本 | hostname -f | 安装软件 |
---|---|---|---|---|
192.168.0.1 | RHEL7.4 | jdk1.8.0_172 | DEV000001 | Ambari Server |
192.168.0.2 | RHEL7.4 | jdk1.8.0_172 | DEV000002 | Ambari Agent |
192.168.0.3 | RHEL7.4 | jdk1.8.0_172 | DEV000003 | Ambari Agent |
192.168.0.4 | RHEL7.4 | jdk1.8.0_172 | DEV000004 | Ambari Agent |
2 环境准备
- Ambari Server主机到Ambari Agent主机免密登录
- Ambari Server/Agent主机需安装JDK
- 确保主机的hostname -f 满足FQDN格式(在安装集群的第三步Confirm Host需要)
- 关闭防火墙
- 确认主机字符集编码为UTF-8(否则Ambari Server 配置数据库可能报错)
- 开启NTP服务
3 部署HDP集群
3.1 登录
通过浏览器访问http://192.168.0.1:8080,默认用户名密码为admin/admin
3.2 安装向导
点击"Launch Install Wizard"
3.2.1 设置集群名字
3.2.2 选择版本并配置为本地源
3.2.3 安装配置
注意:
- Hosts填写域名,需要跟/etc/hosts对应,不可以直接使用IP
- 私钥为Ambari Server的root用户下的私钥
3.2.4 确认 Hosts
注意:
- 失败可以点击Failed进行查看
- ambari注册主机的时候,ambari-agent出现如下错误: NetUtil.py:96 - EOF occurred in violation of protocol (_ssl.c:579)NetUtil.py:97 - SSLError: Failed to connect. Please check openssl library versions. 解决方案 在ambari-agent的配置文件ambari-agent.ini 在 [security]增加一项 /etc/ambari-agent/conf/ambari-agent.ini [security] force_https_protocol=PROTOCOL_TLSv1_2
3.2.5 选择安装服务
3.2.6 分配Master
注意:
- 可以手工选择各个服务所部属的节点
3.2.7 分配Agent
注意:
- 如果发生Error: Package: hadoop_2_6_5_0_292-hdfs-2.7.3.2.6.5.0-292.x86_64 (HDP-2.6-repo-1)Requires: libtirpc-devel错误,需要安装libtirpc-0.2.4-0.15.el7.x86_64.rpm和libtirpc-devel-0.2.4-0.15.el7.x86_64.rpm
yum install -y libtirpc-devel
3.2.8 自定义服务
3.2.9 安装、启动、测试服务
配置好服务之后,等待Ambari安装Hadoop、Spark、Hive集群,安装完成后,Ambari会自动启动服务和测试服务,测试成功后,即可完成集群的安装。
3.2.10 登录查看集群状态