HDP发行版本ambari2.6.2.2安装指南

2019独角兽企业重金招聘Python工程师标准>>>

ambari2.6.2.2安装指南

1，基础软件准备：
操作系统环境：服务器linux内核3.1.0；redhat发行版本7.3，自带python2.7版本；
1.1，需要安装python2.7.5-devel.x86_64开发包，需要安装git，需要安装jdk1.8+，安装ntp服务；关闭iptables服务; 关闭suselinux安全；

1.2，准备mysql，安装mysql5.7，启动mysql，
创建用户ambari,数据库ambari,授权给ambari用户，下面设置ambari-server的时候需要；
创建用户hive,数据库hive，并授权，安装hive的时候需要；
创建用户superset,数据库superset，并授权；
Mysql用户root/###; ambari/###; hive/####; superset/###;
下载mysql jdbc驱动，放目录/usr/share/java下面，后面ambari server需要设置此路径；

1.3，安装apache http2.4服务器，后面创建本地仓库使用本服务器；

1.4，安装依赖包libtirpc-devel-0.2.4-0.8.el7.x86_64.rpm，与使用Linux的libtirpc包版本一致，不然后面安装hdp的时候报错；

1.5 配置Hostname，这里配置三台机器：
master1.hadoop.yspay
slave1.hadoop.yspay
slave2.hadoop.yspay
同时编辑etc/hosts文件，增加ip hostname对应关系

2，选择机器master1.hadoop.yspay准备本地yum仓库（不然安装大部分会失败，安装包有几十g）
2.1 在apache http目录/var/www/html目录创建文件夹ambari和hdp；并授权新建目录为o=rx;
cd /var/www/html
mkdir ambari
mkdir hdp

2.2 安装yum仓库创建工具 
yum install yum-utils createrepo

2.3 下载hdp&ambari官方仓库repo文件
hdp 
wget http://public-repo-1.hortonworks.com/HDP/centos7/2.x/updates/2.6.5.0/hdp.repo  -O /etc/yum.repo.d
ambari 
wget http://public-repo-1.hortonworks.com/ambari/centos7/2.x/updates/2.6.2.2/ambari.repo -O /etc/yum.repo.d

同时copy ambari.repo到所有待安装的机器上,hdp.repo不需要拷贝，只需要在制作本地仓库的机器上存在
scp ambari.repo root@'10.213.33.7*':/etc/yum.repo.d/

2.3 同步hdp官方仓库到本地
cd /var/www/html/hdp
reposync -r HDP-2.6.5.0                           
reposync -r HDP-GPL-2.6.5.0                     
reposync -r HDP-UTILS-1.1.0.22
cd /var/www/html/ambari
reposync -r ambari-2.6.2.2
同步远程仓库到本地过程需要几个小时，耐心等待

2.4  创建本地yum仓库
cd /var/www/html
createrepo ambari
createrepo hdp

2.5 授权文件rx权限给apache用户
cd /var/www/html
chmod -R o=rx ambari
chmod -R o=rx hdp

通过上面步骤，就可以在浏览器上面浏览本地yum仓库的安装包目录结构了 访问路径：localhost:80/ambari localhost:80/hdp

2.6 修改三台机器上面的ambari.repo的仓库源地址为本地仓库的地址
[ambari-2.6.2.2]
name=ambari Version - ambari-2.6.2.2
#baseurl=http://public-repo-1.hortonworks.com/ambari/centos7/2.x/updates/2.6.2.2
baseurl=http://master1.hadoop.yspay/ambari
#gpgcheck=1
gpgcheck=0
gpgkey=http://public-repo-1.hortonworks.com/ambari/centos7/2.x/updates/2.6.2.2/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1

修改#屏蔽的两处baseurl&gpgcheck

完成yum仓库本地化之后，安装就会快很多了

3 安装ambari服务
3.1安装ambari服务端
yum install ambari-server

3.2配置ambari服务
ambari-server setup
按提示进行，一般都默认；只有配置过程中注意选择mysql作为数据库，数据库地址设置为安装mysql的服务器ip或者hostname，用户和库都为ambari

3.3配置mysql 驱动路径
ambari-server setup --jdbc-db=mysql --jdbc-driver=/usr/share/java/mysql-connector-java-5.1.45.jar
如果还提示驱动路径需要配置的话
vi /etc/ambari-server/conf/ambari.properties 
增加一行：server.jdbc.driver.path=/usr/share/java/mysql-connector-java-5.1.45.jar

3.4执行mysql ambari数据库的初始化脚本
mysql -uambari -p -Dambari</var/lib/ambari-server/resources/Ambari-DDL-MySQL-CREATE.sql

3.5开启ambari-server服务
ambari-server startup

现在可以在浏览器上面输入 http://机器ip:8080访问ambari服务了

4 安装ambari客户端
4.1 安装
yum install ambari-agent

4.2 配置agent，指向ambari-server地址
vi /etc/ambari-agent/conf/ambari-agent.ini
修改hostname=master1.hadoop.yspay （这台为安装ambari-server的机器）

4.3 启动ambari-agent
ambari-agent startup

5 安装hdp发行版本的hadoop套装

现在可以在浏览器上面输入 http://机器ip:8080访问ambari服务，选择install wizard开始安装
关键是第二步Select Version，
默认是版本是HDP2.6.5，选择本地仓库Use Local Repository，不要使用public Repository，设置redhat7这个linux版本的仓库地址为本地仓库地址：
redhat7
HDP-2.6
Enter Base URL or remove this OS 输入 http://master1.hadoop.yspay/hdp/HDP-2.6.5.0/
HDP-2.6-GPL
Enter Base URL or remove this OS 输入 http://master1.hadoop.yspay/hdp/HDP-GPL-2.6.5.0/
HDP-UTILS-1.1.0.22
输入 http://master1.hadoop.yspay/hdp/HDP-UTILS-1.1.0.22
后续步骤基本很简单，如果有问题，可以查看日志解决

6 配置hdfs的ha模式
进入ambari界面http://10.213.33.70:8080/ ->dashboard ->HDFS -> 界面右上service actions -> Enable NameServer HA

7 配置yarn的ha模式
进入ambari界面http://10.213.33.70:8080/ ->dashboard ->YARN -> 界面右上service actions -> Enable ResourceManager HA

如果启用HA后，觉得zk不稳定导致HA切换频繁，可以禁止HA，这时候需要手动指定master 

hdfs  haadmin -failover --forcefence --forceactive  nn2 nn1

 

转载于:https://my.oschina.net/u/3522232/blog/1933770