大数据AMBARI2.6.2.2+HDP2.6.5.0安装实战centos7版(新)

最新推荐文章于 2024-09-11 05:26:36 发布
最新推荐文章于 2024-09-11 05:26:36 发布
阅读量1.2k 收藏 3
点赞数 4
分类专栏： 大数据及云服务 Linux及虚拟机 文章标签： ambari hadoop 大数据 kafka
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/a517091937/article/details/107440583
版权

大数据AMBARI2.6.2.2+HDP2.6.5.0安装实战centos7版（新）

最近有点空，把ambari+hdp安装部署操作实战分享给大牛们，拿走不谢！

1、虚拟机准备

我准备的是3台：centos-hadoop1、centos-hadoop2、centos-hadoop3
并且配置好对应主机的网络IP、主机名称、关闭防火墙。
systemctl stop firewalld.service

在这里插入图片描述

2、安装JDK

我这里已经安装好了—系统自带的JAVA，没有安装的小伙伴安装一下且配置好环境变量！
在这里插入图片描述

3、上传ambari、hdp、hdpgpl、hdputils包至centos7服务器

在这里插入图片描述

4、SSH免密登录设置

1）生成公钥和私钥
ssh-keygen -t rsa    
输入命令按3个enter键---
然后就会生成两个文件id_rsa（私钥）、id_rsa.pub（公钥）

在这里插入图片描述
2）将公钥拷贝到要免密登录的目标机器上

ssh-copy-id centos7-hadoop1
ssh-copy-id centos7-hadoop2
ssh-copy-id centos7-hadoop3

在这里插入图片描述

5、安装ntp

我本机已经安装，此步骤不再描述，命令如下：
yum install -y ntp
chkconfig --list ntpd
chkconfig ntpd on
service ntpd start

6、安装Apache2

yum install httpd在这里插入图片描述
并设置开机自动重启

systemctl enable httpd.service

在这里插入图片描述

7、ambari、hdp、hdpgpl、hdputils压缩包解压至var/www/html目录下面

***在这里插入图片描述
解压好的目录：
在这里插入图片描述

8、安装本地源

yum install yum-utils createrepo yum-plugin-priorities -y
gedit /etc/yum/pluginconf.d/priorities.conf
添加gpgcheck=0

9、创建本地源

cd /var/www/html/
 createrepo  ./

在这里插入图片描述

10、下载ambari存储库文件

 wget -nv http://public-repo-1.hortonworks.com/ambari/centos6
 /2.x/updates/2.6.1.5/ambari.repo -O 
 /etc/yum.repos.d/ambari.repo

在这里插入图片描述

11、配置ambari、hdp本地源

1)ambari.repo，配置为本地源:

gedit /etc/yum.repos.d/ambari.repo

#VERSION_NUMBER=2.6.1.5-3
[ambari-2.6.1.5]
name=ambari Version - ambari-2.6.1.5
baseurl=http://centos7-hadoop1/ambari/centos7/2.6.2.2-1/
gpgkey=http://centos7-hadoop1/ambari/centos7/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1

2)修改hdp-util.repo，配置为本地源:

gedit /var/www/html/hdp/HDP-UTILS/centos7/1.1.0.22/hdp-utils.repo

[HDP-UTILS-1.1.0.22]
name=Hortonworks Data Platform Utils Version - HDP-UTILS-1.1.0.22
baseurl=http://centos7-hadoop1/hdp/HDP-UTILS/centos7/1.1.0.22/
gpgcheck=0
enabled=1
priority=1

3)修改hdp.repo，配置为本地源

gedit /var/www/html/hdp/HDP/centos7/2.6.5.0-292/hdp.repo

#VERSION_NUMBER=2.6.5.0-292
[HDP-2.6.5.0]
name=HDP Version - HDP-2.6.5.0
baseurl=http://centos7-hadoop1/hdp/HDP/centos7/2.6.5.0-292/
gpgcheck=0
gpgkey=http://centos7-hadoop1/hdp/HDP/centos7/2.6.5.0-292/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1


[HDP-UTILS-1.1.0.22]
name=HDP-UTILS Version - HDP-UTILS-1.1.0.22
baseurl=http://centos7-hadoop1/hdp/HDP-UTILS/centos7/1.1.0.22/
gpgcheck=0
gpgkey=http://centos7-hadoop1/hdp/HDP-UTILS/centos7/1.1.0.22/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1

访问地址分别是：
http://centos7-hadoop1/ambari/centos7/2.6.2.2-1/
http://centos7-hadoop1/hdp/HDP-UTILS/centos7/1.1.0.22/
http://centos7-hadoop1/hdp/HDP/centos7/2.6.5.0-292/

在这里插入图片描述

12、安装MYSQL

1)进入 cd /usr/local/src/
在这里插入图片描述
2）安装

#wget http://repo.mysql.com/mysql57-community-release-el7-8.noarch.rpm
#rpm -ivh mysql57-community-release-el7-8.noarch.rpm
#yum -y install mysql-server

在这里插入图片描述
启动：service mysql start
3)安装成功后重启mysql

service mysqld restart

在这里插入图片描述
4）连接MYSQL

mysql -uroot -pXrBwJEENp2yhVe4O

5）修改user表，把Host表内容修改为%

update user set host='%' where host='localhost';

6)删除root用户的其他host

delete from user where Host='hadoop102';
delete from user where Host='127.0.0.1';
delete from user where Host='::1';

7）刷新

mysql>flush privileges;

8）退出

mysql>quit;

13、安装Ambari

1）安装ambari-server

yum install ambari-server

2） 拷贝mysql驱动

将mysql-connector-java.jar
复制到/usr/share/java目录下并改名
为mysql-connector-java.jar

将mysql-connector-java.jar复制到
/var/lib/ambari-server/resources
目录下并改名为mysql-jdbc-driver.jar

修改ambari.properties文件
gedit /etc/ambari-server/conf/ambari.properties
添加
server.jdbc.driver.path=/usr/share/java/mysql-connector-java.jar

14、在MySQL中创建ambari数据库

1）创建ambari库在这里插入图片描述
2）使用Ambari自带脚本创建表

mysql >use ambari; 
mysql>source /var/lib/ambari-server/resources/Ambari-DDL-MySQL-CREATE.sql;

3）赋予用户root权限并刷新：

mysql> grant all privileges on *.* to 'root'@'%' identified by 'bigdata';
mysql> flush privileges;

15、配置Ambari

1）执行

ambari-server setup

2）是否自定义设置 y

Customize user account for ambari-server daemon [y/n] (n)?

在这里插入图片描述
3）ambari-server账号设置

Enter user account for ambari-server daemon (root):
可以直接回车root为用户

4）设置JDK。输入：3

Checking JDK...
Do you want to change Oracle JDK [y/n] (n)? y
[1] Oracle JDK 1.8 + Java Cryptography Extension (JCE) Policy Files 8
[2] Oracle JDK 1.7 + Java Cryptography Extension (JCE) Policy Files 7
[3] Custom JDK
Enter choice (1): 3

找到JavaHome路径并输入在这里插入图片描述
5）数据库配置。选择：y

Configuring database...
Enter advanced database configuration [y/n] (n)? y

6）选择数据库类型。输入：3

Configuring database...
Choose one of the following options:
[1] - PostgreSQL (Embedded)
[2] - Oracle
[3] - MySQL
[4] - PostgreSQL
[5] - Microsoft SQL Server (Tech Preview)
[6] - SQL Anywhere
Enter choice (3): 3

7）设置数据库的具体配置信息。

Hostname (localhost):centos7-hadoop1
Port (3306):
Database name (ambari):
Username (ambari):root
Enter Database Password (bigdata):
Re-Enter password:

16、启动Ambari

启动和停止命令为：ambari-server start，ambari-server stop

在这里插入图片描述

17、HDP集群部署

浏览器输入http://centos7-hadoop1:8080/
默认管理员账目密码：admin
在这里插入图片描述

具体组件安装就不描述了 比较简单 自己可以玩玩 谢谢！！！！

Oo骑着猪去买西瓜-杨清oO
关注
专栏目录
CentOS7搭建部署Ambari 2.6.2.0最新版(HDP-UTILS、HDP-GPL)大数据平台
sinat_28371057的博客
09-12 1750
Ambari 2.6.2 中 HDFS-2.7.3 YARN-2.7.3 HIVE-1.2.1 HBASE-1.1.2 ZOOKEEPER-3.4.6 SPARK-2.3.0 注：本文基于root用户操作 一、安装环境准备 操作系统 centos7.5 hdc-data1：192.168.163.51 hdc-data2：192.168.163.52 hdc-data3：192.168.163.53 【安装环境准备每台集群机器一样的操作，或者使用scp远程拷贝】 1、主机名IP映射配置.
ambari-2.6.2.tar.gz 安装包
12-26
ambari-2.6.2 安装包
CentOS 7.4 安装 Ambari 2.6.0 + HDP 2.6.3 搭建Hadoop集群
热门推荐
顺宝小武的博客
01-05 1万+
1.安装环境说明 三台机器安装好CentOS-7-x86_64-Minimal-1708.iso 下载地址：https://www.centos.org/download/ 最好在安装时设置好IP和HOSTNAME 三台机器的IP和HOSTNAME下载如下 主 192.168.31.11 SY-001.hadoop 从 192.168.31.12 SY-002.
Ambari【部署 01】最新版本ambari-2
最新发布
2401_86951128的博客
09-11 750
[在这里插入图片描述](https://img-blog.csdnimg.cn/83fd42a05eec425b9fb2edf87c51d800.png#pic_center)* 无法访问`git`仓库：遇到文件结束【未解决】
Centos7 安装 ambari 2.6.2.2 和HDP 2.6.5 的艰苦历程
黑羽柚咲
08-02 693
Centos7 安装 ambari 2.6.2.2 和HDP 2.6.5 的艰苦历程 安装前的准备 VM虚拟机三台（切记别吝啬，硬盘大点，不然安装的时候突然机器写满，centos连机都开不开） HDP地址: http://public-repo-1.hortonworks.com/HDP/centos7/2.x/updates/2.6.5.0/HDP-2.6.5.0-centos7-rpm.t...
Centos 7下安装Ambari 2.6.2 + Hdp 2.6.4开源大数据平台
qq_36527339的博客
11-08 381
搭建平台之前请查看Ambari,Hdp,Centos版本之间是否兼容 https://supportmatrix.hortonworks.com/ 1.机器节点 192.168.12.21 hdp01.hadoop 192.168.12.22 hdp02.hadoop 192.168.12.23 hdp03.hadoop 2.环境预备工作 CentOS 7.5（英文版最小...
centos7 ambari 2.6.2.0+hdp 2.6.5.0大数据集群安装部署（企业级内部分享）
数据开发探索者
05-05 330
本文是讲如何在centos7.4（64位） 安装ambari+hdp,如果在装有原生hadoop等集群的机器上安装，需要先将集群服务停掉，然后将不需要的环境变量注释掉即可，如果不注释掉，后...
Ambari和HDP下载网盘地址(Ambari-2.5.2.0 + HDP-2.6.2.14)
03-25
该网盘内容是：Ambari-2.5.2.0-centos7.tar.gz，HDP-2.6.2.14-centos7-rpm.tar.gz，HDP-UTILS-1.1.0.21-centos7.tar.gz，绝对真实。。 。。。。一定要注意：其他版本如Ambari-2.7.3.0 + HDP-3.1.0.0，Ambari-2.7.4.0...
Ambari+HDP+HDP-UTILS.rar
03-28
2. `HDP-GPL-2.6.4.0-centos7-rpm.tar.gz`：这是一个RPM打包的HDP组件，RPM是Red Hat Package Manager的缩写，它是Linux上用于安装、升级、查询、卸载软件包的工具。这个文件包含了适用于CentOS 7系统的HDP组件，...
ambari2.7.4.0 centos7全部安装文件
05-10
安装文件包含：ambari-2.7.4.0-centos7.tar.gz、HDP-UTILS-1.1.0.22-centos7.tar.gz、HDP-GPL-3.1.4.0-centos7-gpl.tar.gz、HDP-3.1.4.0-centos7-rpm.tar.gz
ambari-2.7.5.0.72+HDP-3.1.0+KAFKA-3.1.0的RPM安装包
03-25
亲测，自己制作的KAFKA-3.1.0的RPM安装包，用于HDP3.0或3.1的集成，可替换ambari2.7.x里面kafka的2.0.0版本 支持centos7/redhat7的安装
Ambari-2.6.2.2 + HDP-2.6.5 （Centos7和Redhat7版本）的网盘下载地址
05-12
Ambari-2.6.2.2 + HDP-2.6.5 （Centos7和Redhat7版本）的网盘下载地址 ，链接失效可私信
局域网下安装离线Ambari终结版
10-11
主要是局域网下安装离线Ambari的文档完善，环境基本木有变
Ambari2.6.0 安装HDP2.6.3（离线安装）
aigu1989的博客
04-25 705
一、下载安装包 　　因为使用在线安装特别慢，所有的安装包加起来有9个G左右，所以本教程是通过迅雷下载包，然后上传到服务器，通过配置本地源的方式来实现的离线安装。通过ambari安装需要下载下面的三个主要包： HDP：http://public-repo-1.hortonworks.com/HDP/centos7/2.x/updates/2.6.3.0/HDP-2.6.3.0-c...
Ambari-2.7.5.0 + HDP-3.1.5.0网盘地址
IT从业者的成长历程
12-14 2489
文章目录Ambari-2.7.5.0 + HDP-3.1.5.0网盘地址 Ambari-2.7.5.0 + HDP-3.1.5.0网盘地址 如果过期，请留言，我会及时更新链接 ...
HDP3安装包分享(CentOS7版本)
私奔在线
06-14 1579
　　有幸在HDP关闭之前，下载了当时较新的一个稳定版本3.1.5.0。在那之后，HDP与CDH彻底融合，删除了GitHub上的HDP源码，并且关闭了HDP的安装包。　　当初HDP相对于CDH更加拥抱开源。CDH的manager还是闭源付费的，而HDP基于Ambari进行管理，实现了全组件开源、免费，被较多的中小型公司采用。　　在各大云厂商的大数据组件推出之后，小微型公司转用阿里云的E-MR、Max-Compute或其他云厂商的大数据平台。大公司基于开源原生的Hadoop自己封装并搭建自己的大数据平台。剩下中
ambari 离线安装
蘑菇丁的专栏
05-25 1万+
先明确几个概念： 1. Ambari只能安装Hortonworks Data Platform，即Hortonworks的开源Hadoop，不支持Apach的Hadoop平台； 2. 对于已经安装了Apach Hadoop或者其他Hadoop平台的，不能使用Ambari来管理；   再说几个注意事项： 1. Ambari默认的安装方式是使用yum，从远程下载HDP组件安装，而HDP平台安
HDP 2.6.5配置yarn的CGroups
路边摊阿达西的博客
12-25 432
一、前提 CGroups是linux内核的特性，支持CGroups的操作系统有： Centos 6.5 7.3 RHEL 6.9 7.3 SUSE 12 Ubuntu 16 CGroups默认在HDP中没有enable，同时CGroups的启用需要HDP集群启用kerberos； 二、启用CGroups 1. 为了配置CGro...
Apache Ambari 2.6.1.5 系统管理指南
"Apache Ambari 2.6.1.5 系统管理涉及的是Hortonworks Data Platform的管理和维护，适用于HDP-2.6.4.0版本，基于Hadoop 2.7.3和HBase 1.1.2。此文档主要涵盖了Apache Ambari的行政管理内容，由Hortonworks公司提供，...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值