大数据之路、阿里巴巴大数据实践读书笔记 --- 第八章、大数据领域建模综述

86 篇文章 1366 订阅 ¥9.90 ¥99.00
本文介绍了大数据建模的不同方法,如ER模型、维度模型、Data Vault模型和Anchor模型,结合阿里巴巴的大数据仓库发展历程,阐述了各阶段的数据建模技术应用与挑战,强调了良好数据模型对性能、成本、效率和质量的影响。
摘要由CSDN通过智能技术生成
一、为什么需要数据建模
数据建模就是数据组织和存储方法,他强调从业务、数据存储和实用角度合理存储数据。
有了适合业务和基础数据存储环境的模型,那么大数据就能获得以下好处:
  • 性能:良好的数据模型能帮助我们快速查询所需要的数据,减少数据的I/O吞吐;
  • 成本:良好的数据模型能极大地减少不必要的数据冗余,也能实现计算结果复用,极大地降低大数据系统中的存储和计算成本;
  • 效率:良好的数据模型能极大地改善用户使用数据的体验,提高使用数据的效率;
  • 质量:良好的数据模型能改善数据统计口径的不一致性,减少数据计算错误的可能性;
 
二、从OLTP和OLAP系统的区别看模型方法论的选择
  • OLTP系统通常面向主要的数据操作是随机读写,主要采用满足3NF的实体关系模型存储数据,从而在事务处理中解决数据的冗余和一致性问题;
  • OLAP系统面向的主要数据操作是批量读写,事务处
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

杨鑫newlfe

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值