数仓常见的架构

本文介绍了数据仓库的常见架构,包括3NF规范,强调了数据的原子性、唯一性和直接依赖。接着讨论了混合集市架构,其中每个部门有独立的数据集市。然后对比了inmon和Kimball架构,前者通过DW和DM层实现3NF,后者直接用数仓支撑应用。最后提到了两者的混合架构,结合了3NF的DW层和直接对接BI应用的DM层。
摘要由CSDN通过智能技术生成

3NF

1NF: 字段不可再分。即原子性。
2NF: 有主键,非主键字段依赖主键。即唯一性,一个表只说明一个事务。
3NF: 非主键字段不能相互依赖。也就是每一列都跟主键有直接关系,不存在传递依赖

混合集市架构

  1. 每个部门或者某类需求对应一个数据集市,每个数据集市支撑单独的BI应用。
  2. 各个数据集市之间相互独立,数据口径、权限可能不一致,部门间相互访问可能受限制。
  3. 个数据集市保留汇总数据,不保留原子数据。
    混合集市架构示意图

inmon架构

  1. 原子数据到BI应用中间有DW数仓+DM数据集市
  2. DW遵循3NF规则,具备大且全的原子数据。
  3. DM是DW上的汇总数据,没有原子数据,DM直接对应BI应用,BI应用无法直接对原子数据进行加工。若BI应用需要新数据就得从DW上重新加工到DM层。
    inmon架构示意图

Kimball架构

  1. 只有一层数仓,数仓直接支撑数据应用。
  2. 数仓设计优先遵守业务过程并且使用一致性维度,不一定遵循3NF规则。
  3. 数仓中有原子数据。也就是BI应用可以直接访问原市数据。
  • 0
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值