![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
hql
QuinnJob
这个作者很懒,什么都没留下…
展开
-
闲来饮茶唔
题 :如果有500多个事件,每天都有可能发生变化,想统计出一年内每一天不同事件的集合,一条sql写出思路:1 判断 通过单一字段识别当天变化还是通过联合字段识别 (打标签识别)2 设计每天增量表记录变动事件3 根据全年事件group by , 再用 collect_list 集合起来。两种写法,1 sql 2 pyspark(书写更简单点)plan A(伪代码)– log_label (可以是组合字段:识别相同事件的不同变化)– log_eventselect log_event,co原创 2021-10-25 18:13:08 · 98 阅读 · 0 评论 -
Hql_工具文档
小点1 静态分区和动态分区同时存在时,静态分区放在前面(且不能是中文)。2相比较hive,pig更适合多异源数据的流处理。3报表开发中,如碰到多口径,指标体系较多的时候,可以先做temp表插入口径汇总结果打成单条数据,在分标签打薄,实际运行效果更加。4正则表达式...原创 2020-09-17 18:23:58 · 662 阅读 · 0 评论