Hadoop学习笔记（HDP）-Part.08 部署Ambari集群

已于 2023-12-05 13:39:51 修改
阅读量1k 收藏 12
点赞数 10
分类专栏： hadoop 文章标签： 学习 笔记 ambari hadoop
于 2023-12-01 08:54:42 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/glisten0317/article/details/134726095
版权
本文详细介绍了如何在HDP环境中部署Ambari集群，包括创建Ambari数据库，安装和服务配置，以及在多个节点上部署Ambari-Agent。步骤覆盖了AmbariServer的安装、数据库设置、自动化脚本和Agent部署。
摘要由CSDN通过智能技术生成

目录
Part.01 关于HDP
Part.02 核心组件原理
Part.03 资源规划
Part.04 基础环境配置
Part.05 Yum源配置
Part.06 安装OracleJDK
Part.07 安装MySQL
Part.08 部署Ambari集群
Part.09 安装OpenLDAP
Part.10 创建集群
Part.11 安装Kerberos
Part.12 安装HDFS
Part.13 安装Ranger
Part.14 安装YARN+MR
Part.15 安装HIVE
Part.16 安装HBase
Part.17 安装Spark2
Part.18 安装Flink
Part.19 安装Kafka
Part.20 安装Flume

八、部署Ambari集群

1.Ambari数据库

【hdp01】创建Ambari数据库

create database ambari character set utf8;
create user 'ambari'@'%' identified by 'Ambari123456';
grant all privileges on ambari.* to 'ambari'@'%';
flush privileges;

2.部署Ambari-Server

【hdp01】yum安装ambari-server服务

yum install -y ambari-server

下载mysql-connector-java压缩包，创建/usr/share/java目录并将java-connector复制到该目录下
下载链接：
https://downloads.mysql.com/archives/get/p/3/file/mysql-connector-java-5.1.49.tar.gz

mkdir /usr/share/java
cp /opt/mysql-connector-java-5.1.49.jar /usr/share/java

自动化设置Ambari

ambari-server setup

在这里插入图片描述
密码：Ambari123456
登录Ambari数据库，导入Ambari相关表

mysql -uambari -pAmbari123456
use ambari;
source /var/lib/ambari-server/resources/Ambari-DDL-MySQL-CREATE.sql;

启动ambari-server服务

ambari-server start
ambari-server status

在这里插入图片描述

3.部署Ambari-Agent

在hdp01-hdp05节点上部署Ambari-Agent
【hdp01】通过anbile完成安装并启动，/root/ansible/ambari-agent.yml

---
- hosts: all
  tasks:
    - name: install ambari-agent
      yum:
        name: ambari-agent
        state: present
    - name: start ambari-agent
      service:
        name: ambari-agent
        state: started

执行

ansible-playbook ambari-agent.yml

确认状态

ansible all -m shell -a 'ambari-agent status'

登录页面
Ambari-server页面链接：http://192.168.111.201:8080/#/login
初始密码：admin/admin
在这里插入图片描述
修改admin用户的缺省密码为lnyd@LNsy115
在这里插入图片描述

这啥名啊
关注
  • 10
    点赞
  • 踩
  • 12
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
Ambari集群部署全流程
Java框架、并发编程、分布式、微服务、Redis、HarmonyOS、中间件等技术
07-22 3110
Apache Ambari是一个基于Web的支持Apache Hadoop集群的供应、管理和监控的开源工具，Ambari已支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeeper、Sqoop和Hcatalog等。提供Web UI进行可视化的集群管理，简化了大数据平台的安装、使用难度。 服务器资源目录 ip地址 节点 组件 192.168.186.164 master 192.168.186.167 slave
【Ambari】ambari-2.7.5.0集群保姆级安装教程
如切如磋，如琢如磨，臻于至善。
01-28 1252
Apache Ambari是一种基于Web的工具，支持Apache Hadoop集群的供应、管理和监控。Ambari已支持大多数Hadoop组件，包括HDFS、MapReduce、Hive、Pig、 Hbase、Zookeeper、Sqoop和Hcatalog等。Apache Ambari 支持HDFS、MapReduce、Hive、Pig、Hbase、Zookeepr、Sqoop和Hcatalog等的集中管理。也是5个顶级hadoop管理工具之一。
Ambari WebUI-集群管理操作使用说明
杜海的博客
09-14 1109
【总览】【集群操作】【配置文件下载】【图表操作】【图表时间配置】【集群总体监控图表】Memory Usage：整个集群的内存使用情况，包括 cached，swapped，used，和shared。Network usage：整个就群的网络流量，包括上行和下行；CPU Usage：集群的CPU使用情况；Cluster Load：集群整体加载信息，包括节点数目，总CPU个数，正在运行的进程【HDFS层面】左图：整个集群的磁盘使用情况。右图：DFS的使用情况；non DFS的使用情况；
全网最详细的ambari集群搭建详细步骤
luo981695830的博客
05-01 7857
1、服务器环境说明 集群三台节点 可以互相访问 使用root用户 配置免密 centos7 ambari-2.6.2.2 hdp-2.6.5 我的环境如下： 192.168.8.105 my-hdp1 192.168.8.106 my-hdp2 192.168.8.107 my-hdp3 2、防火墙设置 #查看防火墙状态 systemctl status firewalld #关闭防火墙 systemctl stop firewalld #设置防火墙服务开机不自启 system.
Ambari-2.7.4.0 + HDP-3.1.4.0网盘地址.txt
04-20
内容包括ambari-2.7.4.0-centos7.tar.gz，HDP-3.1.4.0-centos7-rpm.tar.gz，链接失效或者部署过程中遇到任何问题可以私信我，同时列举了几条之前项目环境部署过程中遇到过的问题及解决办法，有爱好大数据领域的同学...
Ambari+HDP+HDP-UTILS.rar
03-28
总结来说，这个压缩包提供了搭建和管理Hadoop集群所需的核心组件，包括Ambari的源码以便于定制，HDP的RPM包用于快速部署，以及HDP-UTILS的实用工具集，以帮助用户更有效地管理和维护大数据环境。对于想要学习和使用...
Ambari-2.7.3.0+HDP-3.1.0.0-Ubuntu安装包
09-28
目录：Hidataplus->hdp3.1.0 说明：里面还有ubutntu18和centos7两个版本的 按需使用
Ambari-2.7.3.0+HDP-3.1.0.0-Ubuntu安装包-HDP安装包大全
07-16
Apache Ambari是一款由Apache软件基金会开发的管理工具，它为Hadoop和其他大数据技术提供了直观的Web界面，用于集群的部署、管理和监控。Ambari简化了Hadoop环境的复杂性，使得非技术用户也能轻松操作。在这个场景中...
hadoop-3.1.1.3.1.4.0-315.tar.gz
10-11
ambari-2.7.5 编译过程中四个大包下载很慢，所以需要提前下载，包含：hbase-2.0.2.3.1.4.0-315-bin.tar.gz ，hadoop-3.1.1.3.1.4.0-315.tar.gz ， grafana-6.4.2.linux-amd64.tar.gz ，phoenix-5.0.0.3.1.4.0-315....
【史上最全】Ambari 大数据集群运维与管理操作指南
大数据研习社
03-30 5975
作 用 Hadoop 是用在商业主机网络集群上的大规模、分布式的数据存储和处理基础架构。监控和管理如此复杂的分布式系统是不简单的。为了管理这种复杂性， Apache Ambari 从集群节点和服务收集了大量的信息，并把它们表现为容易使用的，集中化的接口：Ambari Web 功 能 显示诸如服务特定的摘要、图表以及警报信息 创建和管理 HDP 集群并执行基本的操作任务，例如启动和停止服务，向集群 中添加主机，以及更新服务配置 执行集群管理任务，例如启用 Kerberos 安全以及执行 St
Ambari HDP集群搭建全攻略
张伟的专栏
01-12 505
（就是一个开源的hadoop一键式安装服务）此外，Ambari能够安装安全的（基于Kerberos）Hadoop集群，以此实现了对Hadoop 安全的支持，提供了基于角色的用户认证、授权和审计功能，并为用户管理集成了LDAP和Active Directory。此外，Ambari能够安装安全的（基于Kerberos）Hadoop集群，以此实现了对Hadoop 安全的支持，提供了基于角色的用户认证、授权和审计功能，并为用户管理集成了LDAP和Active Directory。（说白了就是可以偷好多懒）
Ambari大数据平台搭建利器【大讲台】
01-07
Ambari是由 HortonWorks 开发的一个Hadoop相关的项目，这款软件具有集群自动化安装、中心化管理、集群监控、报警等功能，使得安装集群从几天的时间缩短在几小时以内，运维人员从数十人降低到几人以内，极大的提高集群管理的效率。推荐进阶课程：大数据实战精英+架构师班
Hadoop - Ambari集群管理剖析
weixin_34082854的博客
12-21 150
1.Overview 　　Ambari是Apache推出的一个集中管理Hadoop的集群的一个平台，可以快速帮助搭建Hadoop及相关以来组件的平台，管理集群方便。这篇博客记录Ambari的相关问题和注意事项。方便为初学者省去搭配各个社区版的烦恼。 2.How to works 　　在Ambari的官方WIKI上介绍了如何去使用Ambari，［官方文档］。官方说法比较简要，下面我补充相关注意...
Ambari搭建Hadoop集群
liumangxiaosi的博客
10-25 1331
1.1 环境需求 1）3个节点的搭建 2）分别为master slave1 slave2 设置静态ip [root@master ~]# cd /etc/sysconfig/network-scripts/    [root@master network-scripts]# vi ifcfg-enp0s3 把动态#BOOTPROTO="dhcp"注释掉，在新增： TYPE="Ethe...
Ambari集群中Ambari-Metrics模块启动后自动关闭的解决办法
qq_40143313的博客
11-02 1966
1、打开ambari集群，将Ambari-Metrics服务先停止。 2、在安装Ambari-Metircs的机器上面查看服务是否关闭：使用ambari-metrics-monitor status和ambari-metrics-collector status命令查看； 3、如果服务没有关闭，使用ambari-metrics-monitor stop 和 ambari-metrics-mo...
Ubuntu16安装Ambari集群
yyoc97的专栏
03-23 2919
安装Ambari集群采坑记录 安装环境 两个干净的Ubuntu16系统分别作为主机和从节点，系统间网络连通，内存最好大于4G； ambari-2.5.1当然也可以选择最新的 HDP-2.6.3 （集成hadoop生态圈的多个组件，特别大） HDP-UTILS-1.1.0.21 JDK-1.8 mysql（当然也可以选择其他数据库，用来存储ambari，hive等相关源数据）...
hadoop集群搭建core-sit.xml文件
最新发布
05-16
Hadoop集群搭建中，core-site.xml是Hadoop中的一个重要配置文件，用于配置Hadoop的核心配置参数。以下是一份简单的core-site.xml文件示例： ``` <name>fs.defaultFS <value>hdfs://master:9000 <name>...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

这啥名啊

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值