从ODS到ADS,详解数仓分层!

0、

Hive之数仓的分层及建模理论_hive数仓分层-CSDN博客文章浏览阅读8.3k次,点赞15次,收藏111次。数据仓库的用途整合公司所有业务数据,建立统一的数据中心产生业务报表,用于作出决策为网站运营提供运营上的数据支持可以作为各个业务的数据源,形成业务数据互相反馈的良性循环分析用户行为数据,通过数据挖掘来降低投入成本,提高投入效果开发数据产品,直接或间接地为公司盈利数仓运行简图数据集市与数仓的区别数据集市(Data Market):是一种微型的数据仓库,它通常有更少的数据,更少的主题区域,以及更少的历史数据,因此是部门级的,一般只能为某个局部范围内的管理人员服务。数据仓库_hive数仓分层https://blog.csdn.net/qq_56870570/article/details/118938411

1、

   从ODS到ADS,详解数仓分层!icon-default.png?t=N7T8http://www.uml.org.cn/sjjmck/202212064.asp

2、

                                   ES是一个分布式的文档仓库。

    详解数据仓库分层 - 知乎公众号:尤而小屋 作者: Peter 编辑:Peter数仓分层 数据分层是数据仓库设计中一个十分重要的环节,良好的分层设计能够让整个数据体系更容易被理解和使用。本文介绍的是如何理解数据仓库中各个分层的作用。 图解…icon-default.png?t=N7T8https://zhuanlan.zhihu.com/p/377978194

3、常见数据仓库问题

    常见数据仓库问题_数仓问题-CSDN博客文章浏览阅读1k次。数仓1. 数据分层1.1 ods层1.2 dw层1.2.1 dwd层1.2.2 dws层1.2.3 dim层1.3 dm层2. 表的种类和特征3. 拉链表4. 数据建模4.1 业务建模4.2 领域概念建模4.3 逻辑建模4.4 物理建模5. 数据模型5.1 星型模型5.2 雪花模型5.3 星系模型5.4 Data Vault模型6. 建模方法6.1 范式建模法(ThirdNormal Form,3NF)6.2 维度建模法6.4 3.实体建模法7. 数据库和数据仓库区别8 数据仓库流程数仓是一个面向_数仓问题https://blog.csdn.net/yj2434/article/details/111596580

4、

5、

6、

7、

8、

9、

10、

11、

12、

13、

14、

15、

16、

17、

18、

19、

20、

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
数仓是一个数据架构和管理系统,用于集中存储和管理企业的各类数据。数仓的设计一般分为多层,其中包括adsods、d、m和s层。这些层次的设计有助于数据的整理、加工和利用。 首先是ads层(Analytical Data Store),它是数仓的最顶层,主要用于存储和处理分析型报表和数据分析。ads层的数据经过清洗和整合后,可以供决策者进行数据分析和业务决策。 其次是ods层(Operational Data Store),它是数仓的中间层,主要用于存储原始数据和操作型数据。ods层的数据一般不做或做很少的清洗和整合,保留了数据的原始状态。这样可以为数据分析提供更多的维度和灵活性。 接下来是d层(Data Mart),它是数仓的下层,主要用于主题化的数据存储和决策支持系统。d层的数据按照业务需求进行整理和聚合,形成了各类主题化的数据视图,方便业务人员进行数据查询和分析。 再次是m层(Metadata),它是数仓中的元数据层,主要包括数据定义、数据描述和数据管理等信息。m层可以帮助用户了解和管理数仓中的各类数据信息,提供数据质量评估和数据一致性保障。 最后是s层(Staging),它是数仓中的数据暂存区,主要用于数据的清洗和整理。s层的数据一般是从源系统中提取过来的原始数据,在经过清洗、格式转换和校验后,再加载到数仓的其他层级中。 总而言之,通过将数仓按照不同的层次进行分层管理,可以使数据的获取、分析和利用更加灵活和高效。不同层次的设计有助于满足不同用户的需求,并提供了数据整合、数据分析和决策支持的基础。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值