Hive 高可用HA搭建_hive ha，头条软件测试面试

先自我介绍一下，小编浙江大学毕业，去过华为、字节跳动等大厂，目前阿里P7

深知大多数程序员，想要提升技能，往往是自己摸索成长，但自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年最新软件测试全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友。

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，涵盖了95%以上软件测试知识点，真正体系化！

由于文件比较多，这里只是将部分目录截图出来，全套包含大厂面经、学习笔记、源码讲义、实战项目、大纲路线、讲解视频，并且后续会持续更新

如果你需要这些资料，可以添加V获取：vip1024b （备注软件测试）

正文

1、使用HiveServer2提供HA的好处

• 1. 在应用端不用部署Hadoop和Hive客户端；
• 2. 相比hive-cli方式，HiveServer2不用直接将HDFS和Metastore暴漏给用户；
• 3. 有安全认证机制，并且支持自定义权限校验；
• 4. 有HA机制，解决应用端的并发和负载均衡问题；
• 5. JDBC方式，可以使用任何语言，方便与应用进行数据交互；
• 6. 从2.0开始，HiveServer2提供了WEB UI。

Hive从0.14开始，使用Zookeeper实现了HiveServer2的HA功能（ZooKeeper Service Discovery），Client端可以通过指定一个nameSpace来连接HiveServer2，而不是指定某一个host和port。

如果使用HiveServer2的Client并发比较少，可以使用一个HiveServer2实例。

但如果这一个实例挂掉，那么会导致所有的应用连接失败。

如上图，这边准备在node1和node2上分别启用两个HiveServer2的实例，并通过zookeeper完成HA的配置

2、配置

zookeep已经安装好，并可用。hive单机已经可用。

在两个安装了apache-hive-2.0.0-bin的机器上，分别编辑hive-site.xml，添加以下参数：

hive.server2.support.dynamic.service.discovery

true

hive.server2.zookeeper.namespace

hiveserver2

hive.zookeeper.quorum

zkNode1:2181,zkNode2:2181,zkNode3:2181

hive.zookeeper.client.port

2181

hive.server2.thrift.port

10000 //两个HiveServer2实例的端口号要一致

数据库的配置记得修改成数据库所在节点的位置。这边数据库安装在node1节点上。

javax.jdo.option.ConnectionURL

jdbc:mysql://node1:3306/hive?createDatabaseIfNotExist=true

3、测试

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化的资料的朋友，可以添加V获取：vip1024b （备注软件测试）

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！
注软件测试）**
[外链图片转存中…(img-DAOcKOse-1713318598411)]

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！