Hive
Hive实践
RotKang
专注大数据技术应用与前沿技术探索
展开
-
Kettle连接Hadoop与Hive
Kettle连接Hadoop与Hive原创 2015-05-04 16:19:27 · 8354 阅读 · 2 评论 -
HiveServer2配置HA
软件环境 CentOS 6.8 Hadoop 2.6.0-cdh5.9.0 Hive 1.1.0-cdh5.9.0 Zookeeper 3.4.5-cdh5.9.0工作原理 常规连接 HiverServer HA 配置Hive HA 前置条件先安装好Hadoop、Zookeeper vi $HIVE_HOME/conf/hi原创 2017-11-30 18:46:51 · 2263 阅读 · 0 评论 -
HiveMetaStore高可用性(HA)配置
软件环境 Hadoop 2.6.0-cdh5.9.0 Hive 1.1.0-cdh5.9.0 Zookeeper 3.4.5-cdh5.9.0工作原理 常规连接 MetaStore HA 前置条件 Hadoop、Zookeeper、Hive是可用的前提Hive Server MetaStore启动 跟单节点配置一样,只不过在多台服务器原创 2017-12-01 10:00:59 · 7859 阅读 · 0 评论 -
Hive数据仓库ODS层数据存储设计
软件环境 Hadoop 2.6.0-cdh5.9.0 Hive 1.1.0-cdh5.9.0 Zookeeper 3.4.5-cdh5.9.0需求背景 数据来源是将8台服务器日志各自压缩成*.gz(8个gz文件)后,按天和小时分区传入到HDFS上,然后通过创建Hive ODS外部表加载到表对应分区,这样一天下来会生产192个gz文件,gz文件是不能进行切分所以查询一天则会产生192原创 2017-12-01 17:11:07 · 10181 阅读 · 0 评论