【大数据之路】数据模型篇 《二》阿里巴巴数据整合及管理体系 【搬运小结】

本文介绍了阿里巴巴数据整合及管理体系,包括定位与价值、体系架构、规范定义和模型设计。通过统一的ODS和DWD/DWS层降低数据互通成本,依据维度建模理论构建一致性的维度和事实,确保数据规范性。规范定义中详细规定了指标体系、命名约定和算法,模型设计遵循维度建模思想,分为ODS、CDM和ADS三层。
摘要由CSDN通过智能技术生成

数据模型篇 《二》阿里巴巴数据整合及管理体系

面对爆炸式增长的数据,阿里巴巴内部使用OneData方法体系对数据进行有序有结构地分类组织和存储,避免重复建设和数据不一致性,保证数据的规范性

概述

定位及价值

建设统一的、规范化的数据接入层(ODS)和数据中间层(DWD 和DWS),通过数据服务和数据产品,完成服务于阿里巴巴的大数据系统建设,即数据公共层建设。降低数据互通成本,释放计算、存储、人力等资源。

体系架构

业务板块:根据业务的属性划分出几个相对独立的业务板块。
规范定义:结合行业的数据仓库建设经验,设计出的一套数据规范命名体系。
模型设计:以维度建模理论为基础,构建一致性的维度和事实(进行规范定义)。

规范定义

名词术语

名词术语 解释
数据域 指面向业务分析,将业务过程或者维度进行抽象的集合。其中,业务过程可以概括为一个个不可拆分的行为事件,在业务过程之下,可以定义指标;维度是指度量的环境,如买家下单事件,买家是维度。为保障整个体系的生命力,数据域是需要抽象提炼,并且长
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值