HIVE体系架构

本文详细介绍了Hive的服务架构,包括CLI、HiveServer和HWI,并强调了它们的独立性和配置特点。MetaStore的参数允许在多个数据库间进行热切换,实现了高可用。此外,NameNode和JobTracker的配置可在会话中修改,支持灵活的数据存储和计算分布。注意避免跨集群数据复制和配置对所有会话的影响。
摘要由CSDN通过智能技术生成

*注:本文基于hive-0.8.1写的

架构图:


一、   service

1、       hive有三种service,分别是cli,hiveserver和hwi。

2、       cli是命令行工具,为默认服务,启动方式$HIVE_HOME/bin/hive 或 $HIVE_HOME/bin/hive --service cli。

3、       hiverserver通过thrift对外提供服务,默认端口10000,启动方式为$HIVE_HOME/bin/hive--service hiveserver。

4、       hwi为web接口,可以通过浏览器访问hive,默认端口9999,启动方式为$HIVE_HOME/bin/hive--service hwi。

5、       每个服务间互相独立,有各自的配置文件(配置metasotre/namenode/jobtracker等),如果metasotre的配置一样则物理上对应同一hive库。

6、       Driver用于解释、编译、优化、执行HQL,每个service的Driver相互独立。

7、       CLI为用户提供命令行接口,每个CLI独享配置,即在一个CLI里修改配置不影

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值