https://blog.datasource.space

Dbeaver连接hive，DBeaver线下数据导入...

Hive简介Hive：由FaceBook开源用于解决海量结构化日志的数据统计工具Hive：基于Hadoop的一个数据仓库工具，可以将结构化的数据文件映射为一张表，并提供类SQL的查询功能。Hive本质将HSQL转化成MapReduce程序Hive处理的数据存储在HDFSHive分析数据底层实现的是MR执行程序运行在Yarn上​ 窗口函数又叫做开创函数，他是一种分析的函数，专门可以解决报表类型的需求分析。他专门用于计算基于组的某种聚合。对于每个组返回返回是多行，也就是聚合函数的分组只有显示一行。

创建列簇按行导入数据

1.Hive failed; error='Cannot allocate memory' (errno=12)2.hive-ls: 无法访问/opt/apps/spark-2.2.0/lib/spark-assembly-*.jar: 没有那个文件或目录3.hive和presto的求数组长度函数区别(hive&cardinality)

开源工具用于hadoop(hive)与传统数据库之间数据的导入导出输入:Mysql、Oracle、DB2等关系数据数据导入到Hadoop输出：从Hadoop的数据导出到Mysql、Oracle等等。

1.Linux下启动hive服务(beeline)2.Supervisor管理hive服务(metastore,hiveserver2),防止意外杀死Hive服务，导致任务中断3.set hive.fetch.task.conversion=more；设置Fetch 抓取

1.Hive如何显示当前数据库2.根据需求设置是否需要执行MR3.如何正确启动Hive

我们默认使用的存储元数据的是hive自带的derby数据库。这个数据库最大的缺点是只支持单session。新建数据库(可视化工具中操作)HDFS/YARN开启。