HiveServer2 配置 HA 及在 HA 模式下的连接

最新推荐文章于 2024-05-13 05:57:54 发布
最新推荐文章于 2024-05-13 05:57:54 发布
阅读量2.3k 收藏 2
点赞数
分类专栏： hive 文章标签： hive HA
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yuchuanchen/article/details/88717390
版权

HiveServer2 HA 模式依赖 Zookeeper，需要预先安装好 ZK 集群。HA 模式一般需要启动2个以上的 HiveServer2，当然启动一个也可以连接。

配置 HA 模式

1.修改 HiveServer2 的hive/conf/hive-site.xml 文件，添加下面4个配置

<property>
    <name>hive.server2.support.dynamic.service.discovery</name>
    <value>true
最低0.47元/天 解锁文章
yuchuanchen
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
Hadoop集群之Hive HA 安装配置
蘑菇丁的专栏
10-13 2620
Hive是基于Hadoop构建的一套数据仓库分析系统，它提供了丰富的SQL查询方式来分析存储在Hadoop 分布式文件系统中的数据。其在Hadoop的架构体系中承担了一个SQL解析的过程，它提供了对外的入口来获取用户的指令然后对指令进行分析，解析出一个 MapReduce程序组成可执行计划，并按照该计划生成对应的MapReduce任务提交给Hadoop集群处理，获取最终的结果。元数据——如表模式
hadoop-ha后的hive配置的三种模式
Pioneer_1的博客
03-20 962
1.本地模式 首先node1、2、3进入zookeeper目录启动启动zookeeper， bin/zkServer.sh start 之后新打开一个node3窗口进入zookeeper目录启动zookeeper客户端 bin/zkCli.sh 然后再node1进入hadoop目录启动hadoop sbin/start-all.sh 在node4机器上、/data/目录下创建hive文件夹 ...
HiveServer2配置HA
RotKang
11-30 2242
软件环境 CentOS 6.8 Hadoop 2.6.0-cdh5.9.0 Hive 1.1.0-cdh5.9.0 Zookeeper 3.4.5-cdh5.9.0工作原理 常规连接 HiverServer HA 配置Hive HA 前置条件先安装好Hadoop、Zookeeper vi $HIVE_HOME/conf/hi
软件测试最全Hive 高可用HA搭建_hive ha(1)，2024年软件测试大厂面试
最新发布
2401_84561461的博客
05-13 854
如上图，这边准备在node1和node2上分别启用两个HiveServer2的实例，并通过zookeeper完成HA的配置。
14-Hive-HA
一个孤独漫步者的遐想的博客
02-22 241
Hive-HA hive的搭建方式有三种： 1、Local/Embedded Metastore Database (Derby) 2、Remote Metastore Database 3、Remote Metastore Server hiveserver2的优点如下： 1、在应用端不需要部署hadoop和hive的客户端 2、hiveserver2不用直接将hdfs和metastore暴露给...
构建高可用Hive HA和整合HBase开发环境（一）
pysense的博客
11-16 739
文章目录1、Hive Requirements2、Hive 环境部署2.1 配置环境变量2.2 配置hive-env.sh和hive-site.xml2.3 配置Hive的运行日志2.4 加入mysql connector2.5 在mysql建表2.6 初始化hive schema2.7 在mysql上查看hive创建的元表2.8 启动hive3、hive建表测试3.1 创建一个员工表3.2 h...
hadoop的独立模式、伪分布模式、完全分布式、HA配置文件
12-22
在Hadoop生态系统中，了解和配置不同的运行模式是至关重要的，这些模式包括独立模式、伪分布模式、完全分布式模式以及高可用性（HA）配置。接下来，我们将详细探讨这些模式及其相关的配置文件。 1. **独立模式**： ...
C9800 HA配置.pdf
04-13
C9800 HA配置
SUSE15 HA for oracle 安装配置文档.docx
12-23
SUSE15 HA for oracle 安装配置文档
Mysql HA 配置方法—masterslave模式
01-28
Openstack中所有的组件均使用同一个mysql数据库，存在单点故障问题，如果mysql停止运行将影响整个云的稳定性；本文主要介绍如何构建基本的Mysql ha高可用环境，从而提高整个云的稳定性。
飞塔HA原理及配置
07-16
飞塔HA原理、环境介绍及配置和故障恢复还有软件更新的详细记载
HIVE HA高可用性及详细使用
05-26
HIVE HA高可用性及详细使用HIVE HA高可用性及详细使用HIVE HA高可用性及详细使用HIVE HA高可用性及详细使用
搭建hadoop的HA集群模式（hadoop2.7.3+hive+spark）
weixin_30387423的博客
10-12 244
参考：http://blog.51cto.com/12824426/2177663?source=drh 一、集群的规划 Zookeeper集群：192.168.176.131 （bigdata112）192.168.176.132 （bigdata113）192.168.176.135 （bigdata114） Hadoop集群：192.168.176.131 （bigdata112） N...
hive metastore ha 配置
刘光华的专栏
09-18 3888
1.需要在两台或多台机器上启动hive metastore 服务，这台机器上hive配置如下 javax.jdo.option.ConnectionURL jdbc:mysql://10.140.60.53:3306/hive?createDatabaseIfNotExist=true JDBC connect string for a JDBC metastor
HiveServer2的HA理解 & 配置实现
呼呼的小窝
04-02 3649
好处 &amp; 工作机制 使用HiveServer2的好处： 1. HiveServer2不用直接将HDFS和Metastore暴漏给用户（对比于使用hive-cli方式） 2. 通过HA机制（从Hive 0.14开始引入该机制），解决了负载均衡和并发的问题 3. 可以在Client端通过JDBC的方式，发起操作，与数据进行交互 配置HA之前，HiveServer2的工作机制： ...
HA-hadoop-3.2.1下配置hive-3.1.2的hive及hiveserver2
xiaoliuxxs
10-23 1910
第二讲
2024年Javascript必须掌握的js库_snabbt，2024年最新从新手到Flutter架构师一篇就够
2401_84558914的博客
05-08 909
它提供一种简单的方式来生成常见的图形，支持几乎所有类型的图表，包括折线图、柱形图、饼图等，以及地毯图和基本的线性回归等功能。FancyForm 是一个非常强大的 JavaScript 库，可以作为 checkbox 和 radio button 的替代品，能生成非常漂亮的 checkbox 和 radio button，并支持几乎所有浏览器，该 JavaScript 库需要 MooTools JavaScript 框架的支持。Blip是一个针对网络音频API的JavaScript库。
通过java程序对kudu表进行权限操作
梦忆故城的博客
08-17 1169
对kudu表进行权限操作除了上述通过impala-shell和hue界面进行SQL操作外，还可以通过Java client、C++ client、Python client操作kudu表，这里介绍通过java程序对kudu表进行权限操作。 一、Impala jdbc连接hive和kudu准备工作 1.配置环境IDEA和JDK 此处不做说明，请自行完成。 2.IDEA搭建maven安装、下载...
Hive 高可用HA搭建
狂奔的乌牛的博客
11-12 2574
1、使用HiveServer2提供HA的好处 1. 在应用端不用部署Hadoop和Hive客户端； 2. 相比hive-cli方式，HiveServer2不用直接将HDFS和Metastore暴漏给用户； 3. 有安全认证机制，并且支持自定义权限校验； 4. 有HA机制，解决应用端的并发和负载均衡问题； 5. JDBC方式，可以使用任何语言，方便与应用进行数据交互； 6. 从2.0开始，HiveServer2提供了WEB UI。 Hive从0.14开始，使用Zookeeper实现了Hive.
IBM小机HA配置全步骤详解：主备模式
"该文档详细介绍了在IBM小机上配置主备高可用性(HA)的步骤，包括HA软件的安装、系统补丁更新以及心跳盘的创建和集群的配置。" IBM高可用性(HA)配置对于确保关键业务系统的连续运行至关重要。以下是配置过程的详细...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值