数仓实践:总线矩阵设计_数仓总线矩阵

本文介绍了数仓总线矩阵设计的重要性,强调了数据一致性维度和事实在数据仓库建设中的角色。总线矩阵作为数据仓库的纲领性文件,有助于数据架构师梳理体系,决策者了解整体情况,以及团队成员理解设计。文章详细阐述了如何编写总线矩阵,包括数据域划分、公共一致性维度确定和业务过程关联,并指出其在项目规划、主数据管理和数据一致性保障等方面的优势。
摘要由CSDN通过智能技术生成

在这种多维体系结构(MD) 的数据仓库架构中,主导的思想便是分步建立数据仓库,并由数据集市组合成企业的数据仓库。

但是,在建立第一个数据集市前,架构师首先要做的就是设计出在整个企业内具有统一解释的标准化的维度和事实,即一致性维度和一致性事实,而开发团队必须严格的按照这个体系结构来进行数据集市的迭代开发。

如果我们在建立数据仓库之初,只考虑单独的某个业务系统的数据建设,不仅无法满足一致性目标的。还会使相互有联系的系统数据由于维度不同导致关联复杂或者关联不上,数据之间互相成为了孤岛,这对于后期的扩展或者整个数仓的建设都是巨大的阻碍。

一致性维度就好比企业范围内的一组总线,不同数据集市的事实的就好比插在这组总线上的元件。

这也是称之为总线架构的原因。因此实际设计过程中,我们通常把总线架构列表成矩阵的形式,其中列为一致性维度,行为不同的业务处理过程,即事实,在交叉点上打上标记表示该业务处理过程与该维度相关,这个矩阵也称为总线矩阵(Bus Matrix)。

了解总线矩阵设计的必要性,它的作用就很容易理解了。简单来讲无非是以下三点:

  1. 帮助数据架构师清晰地梳理整个数据体系
  2. 帮助决策者(Boss)从宏观的角度了解数据仓库的整体情况
  3. 让所有的数据仓库参与者了解数据仓库的设计

如何编写总线矩阵?

首先,总线矩阵不是代码,也不是纯文档性质。在构建总线矩阵对过程中,也需要完成许多代码开发前期的准备工作。

首先完成横向,即 数据域划分,业务过程的确立。数据域是一种对数据的抽象,通过将联系较为紧密的数据划分在同一数据主题

  • 14
    点赞
  • 29
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值