数仓中的全量表,增量表,拉链表,流水表,快照表

本文介绍了数据仓库中的全量表、增量表和拉链表的概念。全量表包含所有最新的数据,无论是否有变化;增量表只记录新增数据,用于日报或月报;拉链表则保存事物的历史状态变化,常用于月报,以节省空间并满足业务统计需求。此外,流水表记录每次修改,用于反映记录变更。
摘要由CSDN通过智能技术生成

预热:

我们先从几个物理概念入手理解什么是流量,存量,增量

(1)存量:系统在某一时点时的所保有的数量;

(2)流量:是指在某一段时间内流入/出系统的数量

(3)增量:则是指在某一段时间内系统中保有数量的变化

(4)增量=流入量--流出量

(5)本期期末存量=上期期末存量+本期内增量

正题

一般公司只是简单分成 全量表,增量表,和拉链表。所以重点关注如下三个表就OK了。

全量表:每天的所有的最新状态的数据。

(1)全量表,有无变化,都要报
(2)每次上报的数据都是所有的数据(变化的 + 没有变化的)

增量表:新增数据,增量数据是上次导出之后的新数据。
(1)记录每次增加的量,而不是总量;
(2)流量是指在一定时间内的增量;
(3)流量一般设计成增量表(日报-常用、月报);
(4)流量和存量的区别:流量是增量;存量是总量;
(5)增量表,只报变化量,无变化不用报

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值