数仓ETL代码优化 - 表字段被过滤和聚合的次数

最新推荐文章于 2022-05-21 09:48:37 发布

阿武z

最新推荐文章于 2022-05-21 09:48:37 发布

阅读量321

点赞数

分类专栏：数据仓库集群运维 Hive

本文链接：https://blog.csdn.net/xw514124202/article/details/104823842

版权

优化案例

假设以下代码，在不同的调度任务中重复出现。那么是否可以抽出公共代码，减少资源使用。

-- 是否可以将埋点里 搜索相关的 整合成一张表
select *
from app_event_tracking
where op_type = '搜索'

-- 是否可以将每日的用户下单情况 整合成公共层表
select
  user_id, ...
from order_item
where create_date = 'yesterday'
group