hive
大跃ET
大数据,数据仓库,每周要看一个spark小模块或小问题
展开
-
hive order by,sort by, distribute by,cluster by 区别
4个by的区别 1)order by :全局排序,一个MapReduce. 2)Sort By:内部排序,每个MapReduce内部进行排序,对全局结果集来说不是排序。 1.设置reduce个数 hive (default)> set mapreduce.job.reduces=3; 2.查看设置reduce个数 hive (default)> set mapreduce.job.reduces; 3.根据部门编号降序查看员工信息 hive (default)>...原创 2020-08-17 21:39:02 · 240 阅读 · 0 评论 -
Zeppelin带有Kerberos认证的Hive解释器的配置
2.zeppelin连接Hive安装配置 zeppelin 版本0.8.2 ,hive版本:3.0.0 2.1.安装启动hive3 略 2.1.配置hiveserver2 如果需要配置zeppelin与hive的集成,我们需要启动hive的metastore服务以及hiveserver2服务。 首先为hive配置hiveserver2 conf/hive-site.xml <property> <name>hive.server2.thrift.port...原创 2020-08-14 13:58:18 · 647 阅读 · 0 评论 -
Hive启动报错:Specified key was too long; max key length is 767 bytes)
启动hive metastore 报错: 启动脚本: bin/hive --service metastore & 报错内容: com.mysql.jdbc.exceptions.jdbc4.MySQLSyntaxErrorException: Specified key was too long; max key length is 767 bytes) 原因:hive的mysql 库只能使用latin1字符集 解决: MariaDB [hive_metadata]> alt.原创 2020-08-10 15:08:16 · 234 阅读 · 0 评论 -
HIVE Leaning
http://hadoop.apache.org/hive/ 把这里里面的东西看好,你也能成为半个hive的高手。 Hive体系结构的目的就是:low-latency(低延迟),batch-oriented(基于批处理的) It began its life at Facebook processing large amount of user and log data. 哈哈,Hi转载 2012-12-16 20:16:15 · 966 阅读 · 0 评论