kangge110的博客

原创 离线数仓分层规范

如商品、人员等，进行缓慢变化维处理，有数据生效开始日期 start_date（格式YYYYMMDD）、数据失效结束日期 end_date（格式YYYYMMDD），有效数据的 end_date 默认 ‘20991231’，消费主数据模型时，需要限定 业务日期ds 在 start_date 和 end_date 范围内。如订单状态、券类型等，按日进行分区，每天全量存储，dt= T-1分区数据写完后，覆盖写入 dt = 'active' 分区，消费码表模型时，一般取dt = 'active' 分区数据即可；