![](https://img-blog.csdnimg.cn/20190918140037908.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
HIVE
从0开始...
小砖工
1.01 ** 365
0.99 ** 365
1.02 ** 365
0.98 ** 365
展开
-
SQL面试题之——用户连续登陆天数和最大登陆天数
解题思路利用等差数列的特性,先对用户登陆日期进行row number 排序,得到一个等差序列;使用登陆日期减去等差序列,如果是连续的登陆日期,得到的值是一样的;最后分组汇总,得到结果数据准备:.........原创 2022-06-17 09:44:12 · 1574 阅读 · 1 评论 -
Oracle、Hive 统计三个月,六个月,九个月,十二个月的平局值
下面为统计截止2020-06-30,近三个月,六个月,十二个月的平均值直接上代码select * from (select a.cust_id, '2020-06-30' as dt1, a.dt, avg(val)over(partition by cust_id order by dt desc) thr_mon_avg, row_number()over(partition by cust_id order by dt desc) sequ原创 2021-02-22 15:38:38 · 1368 阅读 · 0 评论 -
hive 表数据导出到CSV文件
insert overwrite local directory '/url/lxb/hive'row format delimitedfields terminated by ','select * from table_name limit 100hive -e "set hive.cli.print.header=true; select * from table_name where some_query_conditions" | sed 's/[\t]/,/g' >..原创 2021-01-27 18:09:34 · 2371 阅读 · 0 评论 -
hive 分区表添加,修改,删除字段的坑
hive在修改表的字段类型时使用语法:ALTER TABLE table_name PARTITION partition_spec] CHANGE COLUMN] col_old_name col_new_name column_type COMMENT col_comment] FIRST|AFTER column_name] CASCADE|RESTRICT];--新增字段...原创 2020-04-23 15:31:25 · 7213 阅读 · 0 评论 -
hive的元数据
简介:hive是建立在hadoop之上的数据仓库,一般用于对大型数据集的读写和管理,存在hive里的数据实际上就是存在HDFS上,都是以文件的形式存在,不能进行读写操作,所以我们需要元数据或者说叫schem来对hdfs上的数据进行管理。那元数据表之间有没有什么关联呢?答案是肯定的。hive默认元数据表是存储在derby中的,但是derby是单session的,所以我们一般会...转载 2020-04-21 16:07:48 · 2267 阅读 · 0 评论 -
HIVE,Impala 正则表达式剔除中文括号,英文括号
使用 regexp_replace中文的字符串可以直接替换,英文的则需要转译才可以例:SELECT REGEXP_REPLACE('(jackie)&(jackie chan)', '\\(|\\)|(|)', ' ')结果: jackie & jackie chan 注意,这里英文的括号需要双转移符 (\\)结束^ - ^ .........原创 2020-03-31 15:59:03 · 11530 阅读 · 0 评论 -
HIVE分区表新增字段 查询为NULL
问题发现在搬砖过程中发现,HIVE 上对普通表的做新增字段时,再插入数据后,查询数据正常;但是对分区表做新增字段时,再插入数据后,查询数据显示为 NULL开始实验:创建分区表,并插入数据Drop table if exists tab_alter_part_hive purge;Create table if not exists tab_alter_part_hive (...原创 2020-02-28 22:11:01 · 352 阅读 · 0 评论 -
大数据 Hadoop下HIVE 定时备份定时删除全库建表语句
hadoop hive 数据库全表建表语句及运行 sql 脚本的定时备份,定时删除14天之前的备份文件通过 Linux crontab 任务实现定时执行脚本,定时备份及删除原创 2019-12-30 22:41:12 · 657 阅读 · 0 评论