allen的博客

ReferenceHiveHive窗口函数Hive Wiki WindowingAndAnalyticsOracleWindow FunctionAnalytic FunctionsMySQLMySQL窗口函数Window Functions概述代码准备(hive)-- ALTER TABLE order RENAME TO order_infoscreate table order_infos(name varchar(20), order_date d

error: FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.DDLTask解决方法hive issue有效方案：set hive.msck.path.validation=ignore;

参考文档Hive之——Hive SQL优化常规优化以及执行计划解析基本思想HQL优化，本质是对MR/RDD的优化，可以通过explain hql来查看执行计划常见思路表优化分区（分区多，文件多）静态分区动态分区set hive.exec.dynamic.partition=true;set hive.exec.dynamic.partition.mode=nonstrict;分桶规则：对分桶字段值进行哈希，哈希值除以桶的个数求余，余数决定了该条记录在哪个桶中，

背景当hive的metastore为MySQL时，数据库及表编码都必须是latin1(CHARACTER SET latin1 COLLATE latin1_bin)，否则会有出现报错中文在Latin1下乱码，表现为?解决方法修改/etc/my.cnf，文件中增加如下内容[client]default-character-set=utf8[mysql]default-ch...

hive按user导出全部库的表结果信息，并可以作为表信息迁移使用#!/bin/bash# 读取表create table# $1 = dim_sycm_offical# $2 = $eachline# $3 = sql file namefunCreateTable(){ echo "-- --------------$2" >> create_table_fir...

Hive函数数学函数聚合函数说明表生成函数内置函数数学函数函数说明ceil向上取整rand(123)带seed的，在[0,1]之间的随机数exp(d)e的d次幂ln(d)log(d)–自然数e为底d的对数llog10(d) / log2(d) / log(m, d)10为底 / 2为底 / m为底power(d, p)d的p次幂...

# osuseradd username# shellbeeline!connect jdbc:hive2://hive_server:hive_port hive hivecreate database username;create role username;grant all on database usernameto role username;grant role...