![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
HIVE
吃素的哈士奇
这个用户 很懒 什么都没留下。。。
展开
-
hive的操作语句
create table if not exists part1( uid int, uname string, uage int)PARTITIONED BY (country string) row format delimited fields terminated by ',';alter table part1 add if not exists partition(country='china');alter table part1 add if not exists p原创 2022-03-11 16:11:39 · 1872 阅读 · 0 评论 -
HIVE数据库,jdbc方式,获取用户下tables正确和错误方式
HIVE和其他数据库不一样metaData.getTables代码工具方法metaData.getTables这个方法是connection的通用方法,获取某个用户下某个数据库的所有table但是!!!这个方法对HIVE不管用,这个方法会取出这个用户下所有的表而且不会区分用户。代码@PostMapping("/tableListNew") @ResponseBody public List<String> tableListNew(@ApiIgnore @Request原创 2022-02-17 18:02:26 · 2110 阅读 · 0 评论 -
KUDU的相关内容,KUDU的优劣势
这里写目录标题kudu适用场景对比kudukudu吞吐率太差,当单线程跑时,性能完爆几乎所有数据库,包括Oracle,可是当数据量不大,并发数极高的情况下,不及mysql,kudu比较适合大型数据任务,低并发任务的实时查询(越少越快)。很多场景并不适用,目前比较主流的计算要么是大数据离线计算用hive,要么少量数据实时计算,用传统关系型数据库。这种大数据低并发,实时计算场景在应用中并不多适用场景kudu适用于公司内部做分析用,涉及的数据量大但是并发量小,而且响应迅速对比impala+kudu根本原创 2021-08-09 11:28:09 · 1716 阅读 · 0 评论 -
kudu使用master链接的时候,unable connect to master(主机名不认识导致)
本机测试的时候因为kudu的master返回的是主机名怎么让本机能识别主机名找到主机名设置因为kudu的master返回的是主机名主机名是node110,本机不认识怎么让本机能识别主机名找到主机名设置C:\Windows\System32\drivers\etc找到文件hosts192.168.1.110 node110...原创 2021-08-16 16:11:35 · 700 阅读 · 0 评论 -
怎么操作以kudu为引擎的hive数据库,使用IMPALA方式操作
KUDU引擎的HIVE数据库KUDU引擎的HIVE数据库到底什么是kudu引擎的hive数据库呢?kudu引擎的好处怎么使用IMPALA操作kudu引擎的数据库呢首先了解原理实操impala语句kudu中建立表TEST1kudu的TEST1映射到impala(hive)中KUDU引擎的HIVE数据库到底什么是kudu引擎的hive数据库呢?首先KUDU只是引擎,不是一个库,其实本质的数据还是hive数据库。原本的HIVE引擎是mr、tez、spark,那么现在改了,改成了kudu引擎。kudu引擎原创 2021-08-16 11:14:26 · 2063 阅读 · 1 评论 -
IMPALA数据库(其实是HIVE平台,偏向于sql的实现)JDBC链接方式
IMPALA数据库MAVEN驱动核心代码注意点MAVEN<dependency> <groupId>org.apache.hive</groupId> <artifactId>hive-jdbc</artifactId> <version>2.1.0</version> </dependency>驱动org.apache.hive.jdbc.HiveDriver核心代原创 2021-08-05 17:58:22 · 806 阅读 · 0 评论