数据仓库分层架构与各自定义和用途

本文详细介绍了数据仓库的五个关键层次:操作层(ODS)接收和处理原始数据,业务层(DWD)进行数据清洗和转换,存储层(DWS)提供数据访问与安全,应用层(ADS)进行数据分析和决策支持,以及CDM共同维度的存储。这些层次协同工作,确保数据准确、一致,支持业务决策制定。
摘要由CSDN通过智能技术生成

1.操作层(Operational Data Layer 操作型数据层):简称ODS,作为数据仓库的第一层,接受来自于不同操作系统的数据,从源系统中提取原始数据,包括实时和近时的数据更新

2.业务层(数据仓库详细层 Detailed Data Layer):简称DWD,负责来自ODS层数据的清洗,拆分,合并,区分主题(订单or人事or....),将来自不同源系统的数据进行统一的数据模型设计和结构转换,保存历史数据,以支持基于时间的分析和趋势分析,提供数据集市和共享的功能,支持高层数据处理

3.存储层(Data Warehouse Service Layer):简称DWS,数据的访问和查询,通过各种方式(SQL查询)从数据库中查询数据,数据安全和权限控制,包括用户身份验证,数据加密,访问控制,将数据汇总到不同粒度,以满足特定的业务需求,优化数据仓库的性能,通过索引优化,查询优化,缓存机制等手段来提高查询效率和访问时间

4.应用层(Analytical Data Services Layer 数据分析服务层):提供仓库中的数据挖掘和分析,可以定义更复杂的指标和报表,以客户需求建立多维数据模型,设计复杂的查询和报表,ADS层将数据驱动的决策支持融入到组织的业务流程中。它可以提供实时和定期的报表、仪表盘、警报和预警功能,以帮助管理层和业务用户做出准确和及时的决策,在ADS层,可以进行数据治理和元数据管理工作。这包括数据质量管理、数据字典维护、数据血缘追踪等,以确保数据的准确性、一致性和可信度,并支持数据资产的有效管理和利用。

5.CDM:存储共用的维度

数据仓库一般分为三层,分别是操作层(Operational Layer)、数据仓库层(Data Warehouse Layer)和数据展示层(Presentation Layer)。 1. 操作层(Operational Layer):操作层是与业务系统直接交互的层级,用于捕获和存储实时的操作性数据。这些数据来自企业的各个业务系统,包括销售、采购、人力资源等。操作层的主要目标是支持实时的业务操作和决策,通常采用在线事务处理(OLTP)的方式进行数据存储和管理。 2. 数据仓库层(Data Warehouse Layer):数据仓库层是用于存储和管理集成的、历史的、可扩展的数据的层级。这一层主要用于支持企业的分析和决策需求,提供更高层次的数据整合和查询能力。数据仓库层通常采用在线分析处理(OLAP)的方式进行数据存储和管理,包括维度建模、事实表等概念。 3. 数据展示层(Presentation Layer):数据展示层是将数据仓库层中的数据进行可视化、报表和分析展示的层级。这一层主要用于提供给用户直观、易懂的数据展示和分析工具,以支持业务用户进行数据查询、分析和决策。数据展示层通常包括数据可视化工具、报表系统、数据挖掘和分析工具等。 这三个层级的数据仓库架构提供了一个完整的数据管理和分析体系,从数据的捕获和存储到数据的分析和展示,满足了企业不同层次和不同角色的数据需求。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值