数仓建设
文章平均质量分 83
码猿小站
只是因为喜欢大数据
展开
-
【数据中台建设系列之一】数据中台-元数据管理
本编文章主要介绍数据中台核心模块—元数据模块的一些建设经验分享,供大家一起交流学习原创 2023-09-27 10:20:07 · 676 阅读 · 0 评论 -
【数仓建设系列之六】数仓管理利器-数据中台
数据中台是企业内部集中管理和运营数据资源的管理架构,用于帮助企业管理和利用数据资产。它能够将来自不同源系统的数据进行整合、处理和分析,支持业务部门的决策和数据驱动的创新,是一个真正实现D2V(Data to value)的跨部门的数据共享和协作平台原创 2023-09-20 17:05:18 · 185 阅读 · 0 评论 -
【数仓建设系列之五】数仓选型架构概览
离线数仓(Offline Data Warehouse)和实时数仓(Real-time Data Warehouse)是数仓领域两种常见的数据存储和处理架构,它们在数据处理的方式、目标和时间性上有所不同,本文将重点介绍目前主流实时数仓架构设计。原创 2023-09-11 17:41:32 · 1085 阅读 · 0 评论 -
【数仓建设系列之四】数据建设通用规范设计
上篇文章我们讲到了数仓建模中几种常见模型优劣势对比以及数仓完整性建设方案,相信大家对此已经有了初步的了解,本篇文章我们将继续对维度建模中一些通用规范展开讨论。原创 2023-09-01 17:05:49 · 275 阅读 · 0 评论 -
【数仓建设系列之三】数仓建模方式及如何评估数仓完善性
数仓维度建模是一种强大的方法,用于将复杂的业务现实映射到易于理解的数据结构中,它是构建数据仓库的核心技术之一,能够帮助企业将分散和不一致的数据整合到一个一致性高、可查询的数据存储中。通过将业务过程、维度信息和度量指标等要素转化为清晰的关系模型,揭示出隐藏在数据背后的模式和趋势原创 2023-08-25 16:21:55 · 276 阅读 · 0 评论 -
【数仓建设系列之二】数仓基本概念介绍
OLTP和OLAP是我们常见的两种数仓解决方案。从功能定位来看,OLTP数据库是一种严格意义上的事务性和关系型数据库(MySQL就是典型的OLTP之一),它更多的是支持业务侧的更新操作(CRUD),要求能够提供实时在线处理事务的能力,更加注重操作的上的ACID(一致性,原子性,隔离性和持久性)。OLAP数据仓库则更加注重复杂场景下数据整合能力和查询分析能力,它是解决数据孤岛和提供多维分析的主要保障之一原创 2023-08-21 09:44:03 · 129 阅读 · 0 评论 -
【数仓建设系列之一】什么是数据仓库?
数据仓库是一个存储和管理大量结构化和非结构化数据的存储集合,它以主题为向导,通过整合来自不同数据源下的数据(比如各业务数据,日志文件数据等),解决企业数据孤岛,为企业提供统一的数据视图。通过构建不同时间范围或不同业务主题下的分析报告和数据报表等,为企业决策提供一定程度上的支持和帮助。原创 2023-08-15 11:08:41 · 2381 阅读 · 0 评论