数仓架构实践2:京东四层模型架构

京东数仓大致分四层架构


BDM:数据缓冲层,与源系统保持一致,相当于传统数仓的ODS。
FDM:基础数据层,按主题设计,数据融合,存放明细历史数据,相当于传统数仓的EDW。
GDM:通用汇总数据层,明细粒度,可以查询到具体字段信息;数据的预关联,预汇总和预加工;依赖对应用的共性提炼,而不是某个具体应用。
ADM:聚合数据层,应用层。面象应用按需定制。


1:数据缓冲层(BDM)
源业务系统数据的快照,保存细节数据,按天保存
2:基础数据层(FDM)
按业务概念组织细节数据,并进行名称、代码等标准化处理,同时对表进行标准化处理。
3:通用数据层(GDM)
根据京东核心业务价值链按照星型模型或雪花模型设计方式建设的最细业务粒度汇总层。在本层需要进行度量与维度的标准化,保证度量数据的唯一性。
4:聚合数据层(ADM)
根据不同的业务需求采用星型或雪花型模型设计方法构建的数据汇总层
5:维度层(DIM)
维度是对具体分析对象的分析角度,维度要具备丰富的属性,历史信息的可追溯性,对通用的维表要保持一致性。


另附,大数据平台架构:

  • 3
    点赞
  • 39
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值