【大数据入门核心技术-Hive】（四）Hive3.1.2高可用集群搭建

forest_long

已于 2022-12-13 20:27:40 修改

阅读量1.5k

点赞数 1

分类专栏：大数据技术入门到21天通关文章标签：大数据 hive hadoop zookeeper big data

于 2022-12-04 20:48:10 首次发布

本文链接：https://blog.csdn.net/forest_long/article/details/128175497

版权

大数据技术入门到21天通关专栏收录该内容

165 篇文章 8 订阅 ¥49.90 ¥99.00

订阅专栏

超级会员免费看

本文详细介绍了如何搭建Hive3.1.2的高可用集群，包括部署规划、版本选择、集群配置、MySQL安装以及Hive的安装和配置，重点讲解了metastore和hiveserver2的高可用设置，最后进行了连接测试。

摘要由CSDN通过智能技术生成

一、部署规划

Hadoop3.*高可用集群部署参考：

【大数据入门核心技术-Hadoop】（六）Hadoop3.2.1高可用集群搭建

二、部署版本

软件	版本
操作系统	CentOS Linux release 7.6.1810 (Core)
JAVA	java version

了解本专栏

订阅专栏解锁全文

超级会员免费看

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

forest_long

关注关注

1
点赞
踩
2

收藏

觉得还不错? 一键收藏
打赏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

专栏目录

订阅专栏

Hive HA (高可用)搭建

chooser007的博客

07-04

1058

官方文档 hive的搭建方式有三种，分别是 1、Local/Embedded Metastore Database (Derby) 2、Remote Metastore Database 3、Remote Metastore Server 一般情况下，我们在学习的时候直接使用hive –service metastore的方式启动服务端，使用hive的方式直接访问登录客户端，除了这种方式之外，hive提供了hiveserver2的服务端启动方式，提供了beeline和jdbc的支持，并且官网也提出

hive集群搭建

44683331的博客

01-05

1419

hive集群得搭建以及crontab定时任务得设定

参与评论您还未登录，请先登录后发表或查看评论

在Centos7上进行Hive 3.1.2集群安装

Bulut0907

07-11

627

3. 配置conf 3.1 配置Hive运行环境: hive-env.sh 复制hive-env.sh 修改内容如下：添加内容如下： 3.2 配置Hive相关参数: hive-site.xml 文件内容如下： 4. 下载mysql-connector-java-8.0.25.jar到lib目录 5. 配置环境变量向/root/.bashrc添加如下内容执行使环境变量生效初始化Mysql元数据 7. 解决数据库、表、分区、索引的注释中文乱码登录Hive的Mysql元数据库，将元数据表字段的lati

大数据之-hive使用HA高可用集群搭建

yaodunlin的博客

10-16

908

一. 简介 haproxy是一个开源的，高性能的，负载均衡软件，借助haproxy可以快速，可靠的构建一个负载均衡群集。优点如下： 1.可靠性和稳定性非常好，可以和硬件级的负载均衡设备F5相媲美。 2.最高可同时维护40000-50000个并发连接，单位时间内处理的最大请求数为20000个。 3.支持8种负载均衡算法，支持回话保持。 4.支持虚拟主机功能。 5.支持连接拒绝，全透明代理并且有一个功能强大的服务器状态监控界面。 6.拥有功能强大的ACL支持。 haproxy真的很强大。这里

Apache hive 3.1.2从单机到高可用部署 HiveServer2高可用 Metastore高可用 hive on spark hiveserver2 web UI 高可用集群启动脚本

weixin_52918377的博客

05-21

2249

hive部署下载apache hive 3.1.2 http://archive.apache.org/dist/hive/ 注：先看hive编译文档，使用编译好的安装包进行部署官方的hive3.1.4和sprk3.0.0不兼容，需要重新编译。后面配置hive on spark 可以使用spark2.3.0。而spark2.3.0对应的hadoop版本是2.x。重新编译，参考本人写的另一篇文章 hive3.1.4源码编译兼容spark3.0.0 hive on spark 升级guava版本兼容

Tomcat8.5.56启动控制台中文乱码解决

吾林木木的专栏

11-27

544

tomcat启动控制台中文乱码，示例如下：解决：找到你tomcat的配置文件config.properties,更改控制台的编码配置，如图：保存之后重启，ok

flink-sql-connector-hive-3.1.2-2.12-1.15.4.jar

06-05

flink-sql-connector-hive-3.1.2-2.12-1.15.4.jar

flink-sql-connector-hive-3.1.2_2.11-1.11.6.jar 已经解决guava冲突亲测可以

03-19

flink-sql-connector-hive-3.1.2_2.11-1.11.6.jar 已经解决guava冲突亲测可以

flink-sql-connector-hive-3.1.2_2.12-1.12.0.jar flink整合hive3资源包

07-06

由于jar包的下载速度很慢，我想也有很多下载慢的同学，分享下

含两个文件hive-jdbc-3.1.2-standalone.jar和apache-hive-3.1.2-bin.tar.gz

08-14

含两个文件hive-jdbc-3.1.2-standalone.jar和apache-hive-3.1.2-bin.tar.gz 含两个文件hive-jdbc-3.1.2-standalone.jar和apache-hive-3.1.2-bin.tar.gz 含两个文件hive-jdbc-3.1.2-standalone.jar和apache-hive-...

HIVE HA高可用性及详细使用

05-26

HIVE HA高可用性及详细使用HIVE HA高可用性及详细使用HIVE HA高可用性及详细使用HIVE HA高可用性及详细使用

Hive 高可用HA搭建

狂奔的乌牛的博客

11-12

2609

1、使用HiveServer2提供HA的好处 1. 在应用端不用部署Hadoop和Hive客户端； 2. 相比hive-cli方式，HiveServer2不用直接将HDFS和Metastore暴漏给用户； 3. 有安全认证机制，并且支持自定义权限校验； 4. 有HA机制，解决应用端的并发和负载均衡问题； 5. JDBC方式，可以使用任何语言，方便与应用进行数据交互； 6. 从2.0开始，HiveServer2提供了WEB UI。 Hive从0.14开始，使用Zookeeper实现了Hive.

大数据实操篇 No.5-Hive 高可用方式集群部署

pezynd的专栏

08-02

861

第1章简介 Hive是一个工具，原理是mapreduce，可以让用户以sql的方式去做数据分析汇总。第2章安装 2.1 解压 $ tar -zxvf apache-hive-1.2.1-bin.tar.gz -C /opt/module/ 2.2 修改conf目录下配置 $ mv hive-env.sh.template hive-env.sh $ vi hive-env.sh 2.3 配置HADOOP_HOME路径 export HADOOP_HOME=/opt/module/

【Hive部署搭建高可用集群 ha】

耀哥的博客

12-13

1582

Hive搭建 ha高可用集群Hive搭建 ha高可用集群第一步修改hdfs-site.xml第二步修改core-site.xml修改mapred-site.xml第四步修改yarn-site.xml Hive搭建 ha高可用集群你好！这是你第一次使用 Markdown编辑器所展示的欢迎页。如果你想学习如何使用Markdown编辑器, 可以仔细阅读这篇文章，了解一下Markdown的基本语法知识。第一步修改hdfs-site.xml <configuration> <!--指

Hive笔记-001架构概述

cihuan7433的博客

11-30

266

因项目使用到Hive,在工作中阅读了许多文章和书籍,特此将笔记和自己的理解记录下来. 1.概述 Hive是最合适数据仓库应用程序的，其可以维护海量数据，而且可以对数据进行挖掘，然后形成意见和报告等。下图即是Hive与Hadoop交互的架构图： Hive的发行版本中附带的...

Hadoop+Spark + Hive高可用集群部署

woturanshihuaidexiao的博客

12-30

1582

Hadoop+Spark+Hive高可用分布式集群安装集群规划节点IP 节点别名 zookeeper节点 JournalNode节点 NodeManager节点 DataNode节点 zkfc节点 NameNode节点 ResourceManager节点 192.168.99.61 spark01 zookeeper JournalNode NodeManager Data...

Centos7.x 搭建部署 Hive 3.1.2单台+集群

小菜立志成大牛

06-09

235

1.基础环境Hadoop3.2.2集群 mysql数据库基于centos部署hadoop集群 2.Hive 的安装 1.下载hive安装文件 wget https://mirrors.bfsu.edu.cn/apache/hive/hive-3.1.2/apache-hive-3.1.2-bin.tar.gz 2.下载后进行解压 tar -zxf 3.进行配置文件修改，进入conf文件夹 cp hive-default.xml.template hive-site.xml cp hive-env.sh.

大数据集群环境部署(Hadoop-3.3.1 + Hive-3.1.2 + HBase-2.4.4)

smollcat的博客

07-16

4793

typora-root-url: 大数据环境部署.assets Hadoop # 安装解压，移动到/usr/local/src/ export HADOOP_HOME=/usr/local/src/hadoop-3.3.1 export JAVA_HOME=/usr/local/src/jdk1.8.0_211 export export PATH=$HADOOP_HOME/bin:$HADOOP_HOME/sbin:$JAVA_HOME/bin:$PATH # 使用source命令让立即生效 sou.

HA-hadoop-3.2.1下配置hive-3.1.2的hive及hiveserver2

xiaoliuxxs

10-23

1953

第二讲

flink-connector-hive_3.1.2:pom:1.17.0 如何下载