安装ambari

最新推荐文章于 2024-07-26 09:40:31 发布
最新推荐文章于 2024-07-26 09:40:31 发布
阅读量1.1k 收藏 1
点赞数
分类专栏： 大数据 文章标签： ambari hive 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_34158880/article/details/126119537
版权

安装Mysql

  1. 下载并安装
wget -i -c http://dev.mysql.com/get/mysql57-community-release-el7-10.noarch.rpm
yum -y install mysql57-community-release-el7-10.noarch.rpm
yum -y install mysql-community-server
  1. 启动mysql并查看密码
Systemctl start mysqld
Grep “password” /var/log/mysqld.log
  1. 修改root密码
Alter user user() identified by ‘admin123’;
  1. 修改my.cnf配置文件
# 在[mysqld]下添加
collation_server=utf8_general_ci
character_set_server=utf8
default-storage-engine=INNODB
# 在[client]下添加（如果没有[client]，则创建）
default_character-set=utf8
  1. 查看字符集
mysql> show variables like 'character_set_%';
+--------------------------+----------------------------+
| Variable_name            | Value                      |
+--------------------------+----------------------------+
| character_set_client     | utf8                       |
| character_set_connection | utf8                       |
| character_set_database   | utf8                       |
| character_set_filesystem | binary                     |
| character_set_results    | utf8                       |
| character_set_server     | utf8                       |
| character_set_system     | utf8                       |
| character_sets_dir       | /usr/share/mysql/charsets/ |
+--------------------------+----------------------------+
8 rows in set (0.00 sec)
  1. 创建ambari数据库及用户及远程登录
mysql> create database ambari character set utf8;
Query OK, 1 row affected (5.00 sec)
mysql> CREATE USER 'ambari'@'%'IDENTIFIED BY 'admin123';
Query OK, 0 rows affected (0.00 sec)
mysql> GRANT ALL PRIVILEGES ON ambari.* TO 'ambari'@'%';
Query OK, 0 rows affected (0.00 sec)
mysql> FLUSH PRIVILEGES;
Query OK, 0 rows affected (0.00 sec)
  1. 创建hive数据库及用户及远程登录
mysql> create database hive character set utf8;
Query OK, 1 row affected (0.00 sec)
mysql> CREATE USER 'hive'@'%'IDENTIFIED BY 'admin123';
Query OK, 0 rows affected (0.00 sec)
mysql> GRANT ALL PRIVILEGES ON hive.* TO 'hive'@'%';
Query OK, 0 rows affected (0.00 sec)
mysql> FLUSH PRIVILEGES;
Query OK, 0 rows affected (0.00 sec)
  1. 创建oozie数据库及用户及远程登录
mysql> create database oozie character set utf8;
Query OK, 1 row affected (0.00 sec)
mysql> CREATE USER 'oozie'@'%'IDENTIFIED BY 'admin123';
Query OK, 0 rows affected (0.00 sec)
mysql> GRANT ALL PRIVILEGES ON oozie.* TO 'oozie'@'%';
Query OK, 0 rows affected (0.00 sec)
mysql> FLUSH PRIVILEGES;
Query OK, 0 rows affected (0.00 sec)
  1. 创建ranger数据库及用户及远程登录
mysql> create database ranger character set utf8;
Query OK, 1 row affected (0.00 sec)
mysql> CREATE USER 'rangeradmin'@'%'IDENTIFIED BY 'admin123';
Query OK, 0 rows affected (0.00 sec)
mysql> GRANT ALL PRIVILEGES ON ranger.* TO 'rangeradmin'@'%';
Query OK, 0 rows affected (0.00 sec)
mysql> FLUSH PRIVILEGES;
Query OK, 0 rows affected (0.00 sec)

安装apache

  1. 安装apache
Yum -y install httpd
  1. 启动
Systemctl start httpd

配置本地yum源

  1. 配置ambari.repo
[root@localhost yum.repos.d]# cat ambari.repo 
# VERSION_NUMBER=2.7.3.0-139
[ambari-2.7.3.0]
# json.url = http://public-repo-1.hortonworks.com/HDP/hdp_urlinfo.json
name=ambari Version - ambari-2.7.3.0
baseurl=http://172.16.10.119/ambari/ambari/centos7/2.7.3.0-139
gpgcheck=1
gpgkey=http://172.16.10.119/ambari/ambari/centos7/2.7.3.0-139/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1
  1. 配置HDP.repo
[root@localhost yum.repos.d]# cat HDP.repo 
# VERSION_NUMBER=3.1.0.0-78
[HDP-3.1.0.0]
name=HDP Version - HDP-3.1.0.0
baseurl=http://172.16.10.119/hdp/HDP/centos7
gpgcheck=1
gpgkey=http://172.16.10.119/hdp/HDP/centos7/3.1.0.0-78/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1

[HDP-UTILS-1.1.0.22]
name=HDP-UTILS Version - HDP-UTILS-1.1.0.22
baseurl=http://172.16.10.119/hdp/HDP-UTILS-1.1.0.22
gpgcheck=1
gpgkey=http://172.16.10.119/hdp/HDP-UTILS-1.1.0.22/HDP-UTILS/centos7/1.1.0.22/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1

[HDP-GPL-3.1.0.0]
name=HDP-UTILS Version - HDP-GPL-3.1.0.0
baseurl=http://172.16.10.119/hdp/HDP-GPL
gpgcheck=1
gpgkey=http://172.16.10.119/hdp/HDP-GPL/centos7/3.1.0.0-78/RPM-GPG-KEY/RPM-GPG-KEY-Jenkins
enabled=1
priority=1
  1. 创建源目录并解压安装包
Mkdir /var/www/html/ambari
Mkdir /var/www/html/hdp
tar -zxvf ambari-2.7.3.0-centos7.tar.gz -C /var/www/html/ambari/
tar -zxvf HDP-3.1.0.0-centos7-rpm.tar.gz -C /var/www/html/hdp/
tar -zxvf HDP-UTILS-1.1.0.22-centos7.tar.gz -C /var/www/html/hdp/HDP-UTILS-1.1.0.22/
tar -zxf HDP-GPL-3.1.0.0-centos7-gpl.tar.gz -C /var/www/html/hdp/
  1. 生成本地源并创建源数据
createrepo /var/www/html/hdp/HDP/centos7/
createrepo /var/www/html/hdp/HDP-UTILS-1.1.0.22/
createrepo /var/www/html/hdp/HDP-GPL/
  1. 分发repo文件
Scp ambari.repo HDP.repo root@172.16.10.106:/etc/yum.repo.d/
Scp ambari.repo HDP.repo root@172.16.10.107:/etc/yum.repo.d/

配置ssh互信（所有机器都需要执行）

  1. 生成密钥及免密登录
ssh-keygen -t rsa
ssh-copy-id -i root@172.16.10.105
ssh-copy-id -i root@172.16.10.106
ssh-copy-id -i root@172.16.10.107

配置hosts件及主机名(所有服务器都需要执行

  1. 配置host文件
Cat /etc/hosts
172.16.10.119		yum 	yum.hdp
172.16.10.105		nd-00	nd-00.hdp
172.16.10.106    nd-01   nd-01.hdp
172.16.10.107 nd-02   nd-02.hdp
  1. 配置主机名
Hostnamectl set-hostname nd-00.hdp

修改network文件（所有机器都需要执行）

cat /etc/sysconfig/network
# Created by anaconda
NETWORKING=yes
HOSTNAME=nd-00.hdp

配置JAVA环境

  1. 解压JDK及配置环境变量
tar -zxf jdk-8u171-linux-x64.tar.gz -C /data/java
	
tee -a /etc/profile.d/java.sh <<EOF
export JAVA_HOME=/data/java/jdk1.8.0_171
export JRE_HOME=/data/java/jdk1.8.0_171/jre
export PATH=$PATH:/data/java/jdk1.8.0_171/bin
export CLASSPATH=./:/data/java/jdk1.8.0_171/lib:/data/java/jdk1.8.0_171/jre/lib
EOF

Source /etc/profile.d/java.sh

安装ambari-server及初始化（只在master安装）

  1. 下载mysql驱动
mv mysql-connector-java-8.0.5.jar /usr/share/java/mysql-connector-java.jar
  1. 安装ambari
yum -y install ambari-server
  1. 初始化ambari
Ambari-server setup
Using python  /usr/bin/python
Setup ambari-server
Checking SELinux...
SELinux status is 'disabled'
Customize user account for ambari-server daemon [y/n] (n)? y
Enter user account for ambari-server daemon (root):root		# 用户
Adjusting ambari-server permissions and ownership...
Checking firewall status...
Checking JDK...
[1] Oracle JDK 1.8 + Java Cryptography Extension (JCE) Policy Files 8
[2] Custom JDK
==============================================================================
Enter choice (1): 2		# 选择自定义jdk
WARNING: JDK must be installed on all hosts and JAVA_HOME must be valid on all hosts.
WARNING: JCE Policy files are required for configuring Kerberos security. If you plan to use Kerberos,please make sure JCE Unlimited Strength Jurisdiction Policy Files are valid on all hosts.
Path to JAVA_HOME: /data/java/jdk1.8.0_171		# jdk安装路径
Validating JDK on Ambari Server...done.
Check JDK version for Ambari Server...
JDK version found: 8
Minimum JDK version is 8 for Ambari. Skipping to setup different JDK for Ambari Server.
Checking GPL software agreement...
GPL License for LZO: https://www.gnu.org/licenses/old-licenses/gpl-2.0.en.html
Enable Ambari Server to download and install GPL Licensed LZO packages [y/n] (n)? y
Completing setup...
Configuring database...
Enter advanced database configuration [y/n] (n)? y
Configuring database...
==============================================================================
Choose one of the following options:
[1] - PostgreSQL (Embedded)
[2] - Oracle
[3] - MySQL / MariaDB
[4] - PostgreSQL
[5] - Microsoft SQL Server (Tech Preview)
[6] - SQL Anywhere
[7] - BDB
==============================================================================
Enter choice (1): 3		# 选择安装的mysql
Hostname (localhost): nd-00		# 配置hostname
Port (3306): 		# 默认
Database name (ambari): 
Username (ambari): 
Enter Database Password (bigdata): 		# 密码不显示
Re-enter password: 
Configuring ambari database...
Should ambari use existing default jdbc /usr/share/java/mysql-connector-java.jar [y/n] (y)? y
Configuring remote database connection properties...
WARNING: Before starting Ambari Server, you must run the following DDL directly from the database shell to create the schema: /var/lib/ambari-server/resources/Ambari-DDL-MySQL-CREATE.sql		# 此处需注意，启动ambari之前需要执行此句
Proceed with configuring remote database connection properties [y/n] (y)? y
Extracting system views...
ambari-admin-2.7.3.0.139.jar
....
Ambari repo file contains latest json url http://public-repo-1.hortonworks.com/HDP/hdp_urlinfo.json, updating stacks repoinfos with it...
Adjusting ambari-server permissions and ownership...
Ambari Server 'setup' completed successfully.		# 安装成功
  1. 根据提示导入sql文件
Mysql -uambari -p
Use ambari
Source /var/lib/ambari-server/resources/Ambari-DDL-MySQL-CREATE.sql;
  1. 启动ambari-server
Ambari-server start

启动成功截图

安装ambari-agent（需要在所有的服务器安装）

  1. 安装及启动
Yum -y install ambari-server 
Ambari-agent start

访问Ambari web页面

  1. 默认端口8080，Username：admin；Password：admin；http://192.168.121.100:8080
    在这里插入图片描述
    在这里插入图片描述
  2. 开始安装集群，启用安装向导创建集群
    3.
  3. 配置集群名称
    4.
  4. 选择版本
    5.
  5. 配置节点、密钥
    6.
  6. 主机确认在这里插入图片描述
  7. 选择大数据组件
    4.
  8. 节点分配
    9.
  9. 分配从属和客户端
    在这里插入图片描述
  10. 定制服务
    在这里插入图片描述
    在这里插入图片描述
ambari-server setup --jdbc-db=mysql --jdbc-driver=/usr/share/java/mysql-connector-java.jar

在这里插入图片描述在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

  1. 集群整体概况，点击部署
    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述
  2. 等待启动完毕，不用担心警告，后期可以调整，搭建完成，可以在展示页面进行查看集群状态。
    在这里插入图片描述
    在这里插入图片描述
  3. 可以查看监控界面，可以看到大数据组件中出现错误，单个组件点开处理，由于本次搭建集群使用虚拟机，性能不好，可以少选择一些组件。
    14.
JACK-JIE
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
安装ambari平台
qq_34648165的博客
01-27 582
部署机器分布： master.ambari.com node01.ambari.com node02.ambari.com [all]三台机器安装完成，配置yum源 --ok [all]配置域名映射 172.28.128.11 master.ambari.com master 172.28.128.12 node01.ambari.com node01 172.28.128.13 node02.ambari.com node02 [all]每个节点关闭DHCP 设置为静态IP -..
【Ambari】Docker 安装Ambari 大数据单机版本
康师傅没有眼泪
05-28 3771
1.1 部署 docker1.2 部署 docker-compose创建网络1.3 版本说明组件版本操作系统ambari2.7.4HDP3.1.4HDP-GPL3.1.4HDP-UTILS1.1.0.22JDK如下安装只做测试。二 、镜像构建启动2.1 系统镜像构建系统镜像构建2.2 安装包源镜像构建源镜像构建。
CentOS 安装Ambari
qq_32168087的博客
03-29 357
前置条件 修改配置IP跟主机名映射，修改/etc/hosts [root@oracle ~]# cd /etc/yum.repos.d 进入指定目录下载ambari源 [root@oracle yum.repos.d]# wget http://public-repo-1.hortonworks.com/ambari/centos6/2.x/updates/2.0.1/ambari.r...
Centos7安装ambari
jj1130050965的博客
04-05 1332
下载相关软件包：提取码：5ja5。
Centos7安装Ambari2.7.4
阿尔法星球的专栏
04-23 1305
Ambari 是一个开源的 Apache 项目，用于简化 Apache Hadoop 集群的安装、管理和监控。Ambari 2.7.4 是 Ambari 的一个旧版本，但如果你有特定的需求，仍然可以安装它。
centos7安装ambari超详细步骤
weixin_46168298的博客
06-06 2703
centos7 部署安装ambari 超详细教程
使用centos7安装Ambari
SuperHeroX的博客
09-27 528
Ambari简介 Apache Ambari是一种基于Web的工具，支持Apache Hadoop集群的供应、管理和监控。Ambari已支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeper、Sqoop和Hcatalog等。 Apache Ambari 支持HDFS、MapReduce、Hive、Pig、Hbase、Zookeper、Sq...
ubuntu14.04安装ambari
zcc_heu的博客
11-30 4162
本文是在ubuntu14.04上安装ambari。安装 Ambari 最方便的方式就是使用公共的库源（public repository）。在进行具体的安装之前，需要做几个准备工作。一、准备工作使用公共的库源安装ambari可以选择系统一路回车选择系统默认的数据库PostgreSQL和默认的jdk。也可以使用自己事先安装好的jdk和数据库。此处我使用的是自己安装的jdk-8u111和mysql5.7
如何安装Ambari_大数据培训
zjjcchina的博客
12-05 712
发布时间：2020年08月10日作者：atguigu浏览次数：688安装Ambari1）安装ambari-server [root@hadoop102 hdp]# yum install ambari-server2） 拷贝mysql驱动将mysql-connector-java.jar复制到/usr/share/java目录下并改名为mysql-connector-java.jar[root@hadoop102 hdp]# mkdir /usr/share/java[root@hadoop102 hdp]
局域网下离线安装Ambari
04-13
生产环境下内网环境下ambari集群的安装文档，目前已用于生产环境，本文档为离线安装方式，可线上环境使用！
安装Ambari1.2.3
07-11
### 安装Ambari 1.2.3 在 CentOS 的详细步骤与注意事项 #### 一、准备阶段 **1. 关闭 SELinux** - SELinux（Security-Enhanced Linux）是一种强制访问控制机制，如果不关闭它，在进行 SSH 无密码登录等操作时可能...
Ambari安装
12-30
- EPEL（Extra Packages for Enterprise Linux）仓库提供了大量的额外软件包，对于安装Ambari非常有用。 - 使用命令`yum install epel-release`安装EPEL仓库。 - 查看当前可用的仓库列表：`yum repolist`，确认...
HDP3.1.5.0+Ambari2.7.5安装部署（Centos7.2）所需的三台Ambari镜像
04-13
HDP3.1.5.0+Ambari2.7.5安装部署（Centos7.2）所需的三台Ambari镜像
CentOS7局域网下安装离线Ambari
01-06
CentOS7局域网下安装离线Ambari CentOS7局域网下安装离线Ambari CentOS7局域网下安装离线Ambari CentOS7局域网下安装离线Ambari
国产开源ambari之DataSophon部署
JustinMars的博客
08-10 1532
datasophon部署 致力于快速实现部署、管理、监控以及自动化运维大数据云原生平台，帮助您快速构建起稳定、高效、可弹性伸缩的大数据云原生平台。
【大数据面试题】38 说说 Hive 怎么行转列
Jweilai
07-21 498
一步一个脚印，一天一道大数据面试题祝你身体健康，事事顺心！
图数据库查询与操作指南-以Nebula图数据库为例
最新发布
DZSpace，专注于计算机科学与技术领域的技术博主，致力于分享实用知识与技巧，帮助读者快速掌握技术要点，共同探索计算机世界的无限可能。欢迎访问DZSpace的博客，一起学习进步！
07-26 320
图数据库查询与操作指南-以Nebula图数据库为例
本地源安装ambari
10-09
要在本地安装Ambari，您需要按照以下步骤进行操作： 1. 首先，确保您的系统满足Ambari的最低要求。您可以参考Ambari官方文档中的系统要求部分。 2. 下载Ambari软件包。您可以从Ambari官方网站上下载最新版本的Ambari软件包。 3. 解压下载的软件包。使用以下命令解压缩文件： ``` tar -xvf ambari-<version>.tar.gz ``` 4. 进入解压后的Ambari目录： ``` cd ambari-<version> ``` 5. 执行安装命令： ``` sudo ./bin/ambari-server setup ``` 6. 安装过程中会提示您输入一些配置信息，例如数据库连接信息、管理员用户名和密码等。根据提示输入相应的信息。 7. 完成安装后，启动Ambari服务： ``` sudo ./bin/ambari-server start ``` 8. 等待一段时间，直到Ambari服务器完全启动。您可以通过访问http://localhost:8080来访问Ambari的Web界面。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值