安装Ambari 2.7.5 + HDP3.1.5（附安装包）

最新推荐文章于 2024-03-26 11:24:32 发布
最新推荐文章于 2024-03-26 11:24:32 发布
阅读量1.6w 收藏 85
点赞数 26
分类专栏： 大数据 文章标签： ambari
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_36048223/article/details/116113987
版权

目录：

前置准备

1. 安装包准备

Ambari2.7.5、HDP31.5、libtirpc-devel:
链接：https://pan.baidu.com/s/1eteZ2jGkSq4Pz5YFfHyJgQ
提取码：6hq3
redhat7.6操作系统：
链接：https://pan.baidu.com/s/1fXb0wG8ODseXwrYa_WJhBw
提取码：srut

2.服务器配置

linux(redhat7.6)环境：
node001 16g + 120 g
node002 8g + 120 g
node003 8g + 120 g

3.配置静态IP

]# vim /etc/sysconfig/network-scripts/ifcfg-ens33

]# cat /etc/sysconfig/network-scripts/ifcfg-ens33
TYPE="Ethernet"
BOOTPROTO="static"
NAME="ens33"
UUID="f0728346-a3b1-4fc8-9952-d78c4caceae8"
DEVICE="ens33"
ONBOOT="yes"
IPADDR="10.168.1.25"
NETMASK="255.255.255.0"
GATEWAY="10.168.1.21"
DNS1="10.168.1.1"
DNS2="8.8.8.8"

重启网络使配置生效

]# systemctl restart network

查看是否修改成功

]# ifconfig
ens33: flags=4163<UP,BROADCAST,RUNNING,MULTICAST>  mtu 1500
        inet 10.168.1.25  netmask 255.255.255.0  broadcast 10.168.1.255
        inet6 fe80::20c:29ff:feef:fa55  prefixlen 64  scopeid 0x20<link>
        ether 00:0c:29:ef:fa:55  txqueuelen 1000  (Ethernet)
        RX packets 2245696  bytes 2793523273 (2.6 GiB)
        RX errors 0  dropped 3596  overruns 0  frame 0
        TX packets 825291  bytes 616615664 (588.0 MiB)
        TX errors 0  dropped 0 overruns 0  carrier 0  collisions 0

同理配置其他服务器ip

4.配置主机名

  • 修改主机名
vim /etc/hostname

分别将3台服务器hostname分别设置为node001.djin.com,node002.djin.com,node003.djin.com

  • 修改hosts文件
vim /etc/hosts

]# cat /etc/hosts
127.0.0.1   localhost localhost.localdomain localhost4 localhost4.localdomain4
::1         localhost localhost.localdomain localhost6 localhost6.localdomain6

10.168.1.25 node001.djin.com node001
10.168.1.26 node002.djin.com node002
10.168.1.27 node003.djin.com node003

3台服务器的hosts都需要做如上修改

5.关闭防火墙及selinux

3台服务器上分别执行以下操作，关闭防火墙并配置开机不自动启动

systemctl stop firewalld.service
systemctl disable firewalld.service
systemctl status firewalld.service

关闭3台服务器selinux
临时关闭，不用重启服务器

setenforce 0

为了重启后依然关闭，配置如下文件

vim /etc/sysconfig/selinux

修改

SELINUX=disabled

重启后验证是否禁用成功

]# sestatus -v
SELinux status:                 disabled

6.配置ssh互信

方法一

  1. 在每台服务器上执行如下操作，一直回车即可
ssh-keygen -t rsa
  1. 在所有上执行，需要输入其他服务器的密码
ssh-copy-id -i /root/.ssh/id_rsa.pub node001
ssh-copy-id -i /root/.ssh/id_rsa.pub node002
ssh-copy-id -i /root/.ssh/id_rsa.pub node003

方法二
5. 在每台服务器上执行如下操作，一直回车即可

ssh-keygen -t rsa
  1. 在服务器1上将公钥（名为id_rsa.pub文件）追加到认证文件（名为authorized_keys文件）中:
cat ~/.ssh/id_rsa.pub >> ~/.ssh/authorized_keys
  1. 去其他服务器节点将~/.ssh/id_rsa.pub中的内容拷贝到服务器1的~/.ssh/authorized_keys中,查看文件中的内容
 ]# cat ~/.ssh/authorized_keys
ssh-rsa AAAAB3NzaC1yc2EAAAADAQABAAABAQC/eA09X4s5RIYvuYNxVvtOo6unY1mgipsFyoz/hy/Gwk0onfZvBi/Sl3TVRZO5aqcHccAGlLF7OPTKH1qUuKVtnUOQik0TouL5VKsOBDMHHRT9D5UwqaIE8tYDC8V6uwieFgscZcBjhrsJ/Iramo9ce7N9RTO3otRMRQxOs+Wd1F/ZOmpRtMGU2N4RH4i2quRU6m2lt/eJKpNupSHKoztTQRsEanilHVASnikAXH8JpG70iO7RXR/hLz+/Of3ISUrOMSO4/ZIIu4xnYN3jvsXOdK/qIhP/PI2s+uF22IvVE6xZYVadQFa4zAuhQmCBWkE7vMyI1UJkxP7OQYj72LUH root@node001
ssh-rsa AAAAB3NzaC1yc2EAAAADAQABAAABAQCnz8wHoytR2Xlnl04rQq4I2vgUVWbkKjv30pj+Toz4719ah4cY9pvZj0JsfhVzaaCsR14BLFVLkqKUhCWK3K6muT4iHb+N0WirpbwfJkztmQeco7Ha9xrPQ8v/I4xZujFoMVA0tkb/32zRTxOkPv9AUgB8V6Lin6LnB/AcnhnmoIs5PdbAdh/kBGpQGKIZkbyCUOYz9/PZuGJoJBblqfWiqzxYYLN9+cYMkmPnB1HdDewAepIsIC18U3ujE+1Su2UlmISPvvr1zG4XR4ZZoKQsOOJq3XRMGVkDvmFhl03JHZpd6BW0796CeYVZ41UomWXTOduQql+tYWUbegzGLmRZ root@node002
ssh-rsa AAAAB3NzaC1yc2EAAAADAQABAAABAQC8AFoGJHp2M45xLYNzXUHLWzRwHsgRPHjeErStq0tEy9bQv4OkN41j0FrxVAYJiGHdHGturriVgUEtL59RjcrJH6bAvhP54nM5YiQlNnWnSUR27Zuaodz4nhYUFq/Co5eDN6lTfL8pgYiEdpBOvE5t1w3bisdblP7YGQ2lF1zzCEGfQ79QbntEbyGNoR9sGHm11x9fOH+fape8TjQJrEAO4d1tAhMqVygQKwqwAPKeqhEum6BaLli83TsXzd7gyz9H7AAc1m04NaLB26xfynW6MVuk1j94awXKlGXjrbNTC/Kg6M8bd5PT/k3DOkx4b+nEs8xZ5x1j4D2OaO1X6rZx root@node003
  1. 设置认证文件的权限：
chmod 600 ~/.ssh/authorized_keys
  1. 将~/.ssh/authorized_keys同步到其他节点
scp ~/.ssh/authorized_keys node002:~/.ssh/authorized_keys
scp ~/.ssh/authorized_keys node003:~/.ssh/authorized_keys
  • 注意：这里第一次使用同步还需要密码，之后就不需要了
  1. 验证免密是否配置成功
    ssh到不同服务器
ssh node002

7.安装pssh工具（非必须）

pssh基于Python编写的并发在多台服务器上批量执行命令的工具，它支持文件并行复制、远程并行执行命令、杀掉远程主机上的进程等,这里介绍安装及常用命令，完整的介绍参考这里。

  1. 我将安装包放到/opt/bao目录下
cd /opt/bao
wget http://peak.telecommunity.com/dist/ez_setup.py
wget http://files.opstool.com/files/pssh-2.3.tar.gz

上面的网址可能下载不下来，用另一个

wget https://pypi.python.org/packages/60/9a/8035af3a7d3d1617ae2c7c174efa4f154e5bf9c24b36b623413b38be8e4a/pssh-2.3.1.tar.gz
  1. 解压到/opt/src目录下
tar -zxvf pssh-2.3.1.tar.gz -C /opt/src
  1. 更改包名,并cd到包里
cd /opt/src
mv pssh-2.3.1 pssh
cd pssh
  1. build &install
python setup.py build
python setup.py install
  1. 查看安装
]# pssh --version
2.3.1
  1. 创建nodes文档，添加需要批处理的服务器节点
    为了以后使用方便，在根目录下创建,文件名可随意，方便使用原则
vim /node.list

]# cat /node.list
root@10.168.1.25:22
root@10.168.1.26:22
root@10.168.1.27:22
  1. 使用实例
]# pssh -h /node.list -i -P 'date'
node001: 2021年 08月 28日 星期六 20:20:07 CST
[1] 20:20:07 [SUCCESS] root@node001:22
2021年 08月 28日 星期六 20:20:07 CST
node002: 2021年 08月 28日 星期六 20:20:07 CST
[2] 20:20:07 [SUCCESS] root@node002:22
2021年 08月 28日 星期六 20:20:07 CST
node003: 2021年 08月 28日 星期六 20:20:07 CST
[3] 20:20:07 [SUCCESS] root@node003:22
2021年 08月 28日 星期六 20:20:07 CST

8. 配置ntp时钟同步

  1. 卸载系统原装的chrony
yum -y remove chronyd
  1. 所有节点安装NTP服务
[root@node001 ~]# pssh -h /node.list -i 'yum -y install ntp'
  1. 选择一台服务器作为NTP Server
    将如下配置vim /etc/ntp.conf
# Use public servers from the pool.ntp.org project.
# Please consider joining the pool (http://www.pool.ntp.org/join.html).
server 0.centos.pool.ntp.org iburst
server 1.centos.pool.ntp.org iburst
server 2.centos.pool.ntp.org iburst
server 3.centos.pool.ntp.org iburst

修改为

# Use public servers from the pool.ntp.org project.
# Please consider joining the pool (http://www.pool.ntp.org/join.html).
#server 0.centos.pool.ntp.org iburst
#server 1.centos.pool.ntp.org iburst
最低0.47元/天 解锁文章
不饿同学
关注
  • 26
    点赞
  • 踩
  • 85
    收藏
    觉得还不错? 一键收藏
  • 21
    评论
专栏目录
Ambari 2.7.5+HDP3.1.5离线安装详细教程（附安装包）
QYmufeng的博客
02-22 3310
一.准备工作 系统：centos7.6（推荐使用：redhat7、redhat-ppc7、ubuntu14、ubuntu16、ubuntu18） Ambari版本： 2.7.5 HDP版本：3.1.5 主机： 系统 ip 主机名称 主机名 内存 Ambari server mysql httpd服务 centos7.6 192.168.112.143 cluster01.toroidal.comcluster01 8G √ √ .
signature=e7411d00c74ac359f20083a015dc6ea9,交易 00a7e78a66c34dd926b97570f8be719f0d976c0d89ac3ac200f52c...
weixin_34982726的博客
05-29 6934
00483045022100e22d6cc2d0ccf8c54f562169ee63305a228a99e0fc2385ed2f454ed7b5d9058b02203e09c96745049120a44b6149eb34b4281cf3f767bba578c33a9e6d3b9e5976364147304402206cb32c3e6e461bc11d75521e09575b851b9c6c7f7b...
centos7 ambari2.6.1.5+hdp2.6.4.0 大数据集群安装部署
微信公众号：大数据从业者
03-29 186
前言 本文是讲如何在centos7(64位) 安装ambari+hdp,如果在装有原生hadoop等集群的机器上安装，需要先将集群服务停掉，然后将不需要的环境变量注释掉即可，如果不注释掉，后面虽然可以安装成功，但是在启动某些服务的时候可能会有异常，比如最后提到的hive启动异常。本文适合系统： RedHat7、CentOS7、Oracle Linux7(都是64位)注意:centos7中文系统有...
【原创】RockyLinux9.3手动编译MySQL8.2.0源码，超详细！！
最新发布
DCTANT的博客
03-26 1259
MySQL安装如果使用rpm包安装实在过于麻烦，缺这缺那的，我就想能不能就源码包自己手动编译安装，编译完的包可以给其他服务器直接用，这样只需要麻烦一次，后面就方便了。至于为什么不用RockyLinux8.6版本，因为我试过了，编译成功的MySQL执行报错了，我也不知道什么原因导致的，索性换到最新的RockyLinux9.3版本了。我这里用的电脑都是X86_64平台的，如果是其他CPU架构的机型则需要下载对应CPU架构版本的rpm包。
Ambari2.75安装及HDP3.1.5集群搭建.pdf
11-09
Ambari2.75安装及HDP3.1.5集群搭建.pdf
最新版Ambari2.75安装及HDP3.1.5集群搭建
NDF923的专栏
05-06 8944
最近打算使用ambari搭建集群，却突然发现Cloudera相关软件包括HDP、CDH都收费了，都需要有效的订阅，并且只能通过付费墙进行访问（官宣地址：https://cn.cloudera.com/downloads/paywall-expansion.html#）。还好笔者千辛万苦在内外网找了两天才搞到最新版ambari2.7.5和HDP3.1.5的二进制安装包。以下详细介绍ambari的安装，及使用ambari搭建HDP集群的详细步骤，以及遇到的各种问题；文末有提供ambari2.7.5和HDP3.1
Ambari-2.7.6和HDP-3.3.1安装
hidataplus的博客
11-05 3811
Ambari-2.7.6和HDP-3.3.1安装
Ambari-2.7.5.0 + HDP-3.1.5.0网盘地址
IT从业者的成长历程
12-14 2379
文章目录Ambari-2.7.5.0 + HDP-3.1.5.0网盘地址 Ambari-2.7.5.0 + HDP-3.1.5.0网盘地址 如果过期，请留言，我会及时更新链接 ...
Ambari2.7.5+HDP3.1.5 离线安装网盘下载地址
09-16
免费的。还有HDP3.2.1等资源，欢迎下载，转发，收藏，点赞！
Ambari2.7.5&HDP3.1.5.txt.zip
01-17
Ambari2.7.5&HDP3.1.5离线安装包全套
Ambari 2.7.5及其配套的HDP和HDF资源包
08-15
ambari-2.7.5.0-centos7.tar.gz HDP-3.1.5.6091-centos7-rpm.tar.gz HDF-3.4.1.1-centos7-rpm.tar.gz HDP-GPL-3.1.5.0-centos7-gpl.tar.gz hdf-ambari-mpack-3.4.1.1-4.tar.gz HDP-UTILS-1.1.0.22-centos7.tar.gz ...
Ambari2.7.6+HDP3.3.1 离线安装网盘下载地址
11-05
支持x86_64和ARM64(aarch64)
HDP3.1.5源码下载—hadoop hbase hive
02-17
HDP3.1.5源码下载—hadoop hbase hive
cloudra的Ambari-2.7.5.0 和 HDP-3.1.5.0自行转存网盘
02-16
Ambari-2.7.5.0 和 HDP-3.1.5.0网盘地址确定可用
Ambari2.7.4 HDP-3.1.4(hortonworks集群安装).docx
12-18
Ambari是一个基于web的工具，用于配置、管理和监视Hadoop集群，支持HDFS、MapReduce、Hive、HCatalog,、HBase、ZooKeeper、Kafka、Oozie、Pig、Sqoop和Spark等服务。Ambari同样还提供了集群状况仪表盘，以友好的用户界面对它们的性能特性进行诊断。
Ambari-2.7.4.0+HDP-3.1.4.0安装包-HDP安装包大全
09-05
Ambari-2.7.4.0 + HDP-3.1.4.0 （Centos7和Redhat7版本）的网盘下载地址 ，链接失效可私信，其他版本也可以私信
ambari 2.7.5 安装包下载
07-05
该资源为Ambari2.7.5预编译安装包，资源已放到百度网盘，可以先下载《ambari预编译安装包网盘下载地址.txt》获取网盘地址进行下载，资源内容：ambari-2.7.5.0-centos7.tar.gz 如有其他ambari相关资源需求可私信我
ambari-2.7.5+hdpHDP-3.1.5
one_uueu的博客
11-16 3676
1.查看linux版本、内核、cpu、内存 [root@localhost ~]# cat /etc/redhat-release CentOS Linux release 7.8.2003 (Core) [root@localhost ~]# [root@localhost ~]# uname -a Linux localhost.localdomain 3.10.0-1127.el7.x86_64 #1 SMP Tue Mar 31 23:36:51 UTC 2020 x86_64 x86_64 x8
ambari 2.7.3下载
11-14
Ambari 2.7.3是Apache软件基金会开发的一个开源项目，用于管理、监控和协调Apache Hadoop集群的工具。要下载Ambari 2.7.3，可以前往Apache Ambari官方网站或者在软件下载网站进行搜索。在官方网站上，可以找到Ambari的最新版本和相关的文档。在软件下载网站上，也可以找到Ambari的安装包和相关信息。在下载Ambari之前，需要确保操作系统和硬件符合Ambari的系统要求，以及了解Ambari的安装和配置步骤。一般来说，可以选择适合自己系统的安装包进行下载，并按照官方文档或者安装指南进行操作。 另外，还可以通过命令行工具或者包管理工具来下载和安装Ambari。在Linux系统下，可以使用wget或curl命令来下载Ambari安装包。在安装包下载完成后，可以通过解压和安装命令来进行安装。对于使用包管理工具的系统，如yum或apt-get，也可以通过命令来安装Ambari。不过需要注意的是，通过命令行工具或者包管理工具安装Ambari可能无法及时更新到最新版本，建议还是直接从官方网站下载最新版本。 总之，下载Ambari 2.7.3需要注意系统要求和安装步骤，可以选择从官方网站或者软件下载网站进行下载，也可以通过命令行工具或者包管理工具来进行安装。安装完成后，可以利用Ambari来管理和监控Hadoop集群，提高集群的稳定性和可靠性。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 21
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值