数仓 -OLAP OLTP 建模方法

1 基本概念

OLTP - 在线事务处理系统， 主要操作是随机读写

为了保证数据一致性，减少冗余常使用关系模型

在关系模型中，使用三范式减少冗余。

三范式的概念可以看这篇文章：

数据库三大范式是什么？(3NF详解)_Dzzzzzzzzzzzzzzz的博客-CSDN博客_数据库三大范式是什么

OLAP 在线联机分析 --在线联机分析 

OLAP，主要操作是复杂分析查询 ，更关注分析性能： 关注数据整合，分析，处理性能 

OLAP 根据底层数据存储方式不同，又分为ROLAP，MOLAP，HOLAP 

ROLAP 关系型	使用关系型模型建构，存储系统一般为RDBMS
MOLAP 多维型OLAP	预先聚合计算，使用多维数据形式存数据结果，加快查询分析结果（不存储明细数据）
HOLAP 混合架构OLAP	二者集大成者，底层是关系型，高层是多维矩阵型，查询效率低于MOLAP，高于ROLAP（可以存储明细数据，把与计算结果存储在上层）

ROLAP建模方法：

维度模型 ： 表被分为维度表和事实表，维度是对事实的一种组织

维度一般包含分类 时间 地域等 ，一般有星型模型，雪花模型，星座模型 三种

1 星型

2 雪花

3 星座

4 宽表模型 -

是维度模型的衍生，适合join性能不佳的数仓产品 ，减少join的操作

MOLAP 建模方法

MOLAP 对数据进行预计算，讲聚合结果存储在CUBE模型中

cube模型以多维数据的形式，物化到存储系统中，加快后续的查询

生成cube需要大量的时间空间， 维度预处理可能会导致数据膨胀

常见产品：

Apachew Kylin，Druid