Hive metastor HA配置

最新推荐文章于 2023-11-28 17:41:34 发布

青山流水在深谷

最新推荐文章于 2023-11-28 17:41:34 发布

阅读量397

点赞数

分类专栏： Hive 文章标签： hive

本文链接：https://blog.csdn.net/dymkkj/article/details/117330438

版权

Hive 专栏收录该内容

19 篇文章 0 订阅

订阅专栏

本文介绍了如何实现Hive Metastore服务的高可用性，通过配置多个metastore服务和使用HA架构，确保在单点故障情况下能及时切换。详细讲述了配置参数如`hive.metastore.uris`和`hive.cluster.delegation.token.store.class`，并演示了在两台机器上启动metastore服务的过程。

摘要由CSDN通过智能技术生成

前言

为应对生成环境hive服务可用性，需要对hive metastore服务进行backup,则其中一个metastore无法进行对外服务，backup及时转正，对发送请求进行处理
图解
- 单点故障
- HA 架构

HA 配置

依赖服务

hdfs,zookeeper,hive

参数配置

hive-site.xml配置：

<!-- 配置多个metastore服务，逗号分隔 -->
<property>
 <name>hive.metastore.uris</name>
 <value>thrift://dw1:9083,thrift://dw2:9083</value>
 <description>A comma separated list of metastore uris on which metastore service is running</description>
</property>
<!-- token服务，可以使用内存，zookeeper存储 -->
<property>
 <name>hive.cluster.delegation.token.store.class</name>
 <value>org.apache.hadoop.hive.thrift.MemoryTokenStore</value>
 <description>Hive defaults to MemoryTokenStore, or ZooKeeperTokenStore</description>
</property>

服务

在两台安装hive的机器启动hive metastore
nohup  /data/program/apache-hive-2.1.1-bin/bin/hive  --service  metastore &
nohup  /data/program/apache-hive-2.1.1-bin/bin/hive  --service  metastore &