湖仓一体架构构建与平台应用实践(附件PDF下载)

本文探讨了数据仓库与数据湖的区别与融合,强调湖仓一体的重要性。数据仓库适合存储结构化数据,而数据湖则适用于非结构化数据。湖仓一体旨在平衡数据的灵活性与规范性,实现数据的自由流动。毛亮坚老师的PPT分享涵盖了大数据平台架构演进、湖仓一体架构构建思路、应用案例及未来趋势,为读者提供了全面的洞见。
摘要由CSDN通过智能技术生成

数据仓库适合存储结构化的、信息密度高的、经过处理后的数据。例如我们通过大数据分析得到的关联信息、画像信息等,都可以放在数据仓库中。

“仓库”一词也将它的特点表现得清清楚楚。仓库,东西要放在规整的货架上,甚至还会给货架编号。这里的数据很规范,用起来没那么灵活。

数据湖适合存储非结构化的、信息密度低的、未经清洗的数据。例如生产中我们获取到的日志信息、长文本信息等都可以直接放到数据湖中。

曾经有一段时间,大家对于大数据的存储形式分裂为了两派。不断询问是选择数据湖,还是选择数据仓库?

选择数据湖,才能拥有数据的多样与灵活,有利于将不同的数据组合在一起,发现新的规律。选择数据仓库,才能拥有数据的规范与清晰,有利于数据的便捷使用,也利于数据的长时间存储。

湖仓一体,即打通数据仓库和数据湖两套体系,让数据和计算在湖和仓之间自由流动,从而构建一个完整的有机的大数据技术生态体系。这就像是在你的面前放了一个摆满了文档的书桌(数据湖),也放了一个小书架(数据仓库)。于是两者的数据以随意获取,在灵活与规范之间取得了平衡。

6557b15660a83e1c946d6f2054121d4e.png

下面这份PPT材料来自DAMA中国,专题分享活动《湖仓一体,构建企业数字化新基座》,作者数据科学家毛亮坚老师,主要介绍了大数据平台架构演进、详细阐述湖仓一体架构构建与探索思路、湖仓一体化平台应用实践案例、最后提出了湖仓一体化平台未来发展趋势,推荐给大家阅读。

PDF资料获取方式: 关注公众号,后台回复: 666 ,转发朋友圈并截图

5701e985ad5907c250831f3dda2419cb.png

de3a84c315865cd0ba5c49ec645c6ca7.png

0bd3779b914efb575453402d6db984a7.png

57b6c7f8fda2125b6976a55edfef4f54.png

d626dae18b4f56dc72b400c1f0314e81.png

9c6b09167e425ef6b4c7fbfaa159c6b0.png

d6485c00c28b72ce4fdb984d84fb56ee.png

530189241a3a3a4e34072572fe53f9b3.png

66ac6e73b0afb93a7e2b6659c592dea7.png

23fa65b57c123dc149b98153d02f5049.png

795fc04688da628a9503a65bf1a67c63.png

168b0a8ffbaf816fecf5d07df4db1113.png

d698c41b0963d1d7577e441fb373a665.png

941e5aa7ecd2ed736c08f0401a3f2f1a.png

c55e0586fc1cd4828fad96303fdae3a7.png

ef7f3a729ecaf5f0d910844918eb01bf.png

f944abf6209e143f309478a82d3e1d41.png

7398a6a9b3928757d8f43e94ee7b6b7f.png

f25d551c37f8a409d6e6b4fb8bfee89f.png

88c14ac3fedc0de59623d72191e18234.png

fde11df497b42e57297e36b7ad75828e.png

2ce7e82b7434e2cc865f47fac55a6e3f.png

1be1896f290492dcd194acf69bd0cc48.png

0ed720b1e693c0d507ec2f983a97a373.png

f595ae7f80bc9f37e63bdaad51aaae80.png

872dec5fa4d171e9cfe2b1aa1aa824fb.png

da1875b64af76d4a9f76651a817ac559.png

854b9233263c872d363c324844e4ed3f.png

5a9e1d312a428401bdb5af13006863d4.png

09237cc6c9240ab51fb02b8efd00c6ee.png

01ce275885042b1a92e72d574014b865.png

1323b873a112c16617c84be37b2222ee.png

ef3a7081e8ac0bfeb7268b22ad31c198.png

6de161eb5c31c4c5bb610a690992c8de.png

30e1e90bfbf462d13b4447789890b8ec.png

cf934fd4b2051aadeb6adcd29066f4eb.png

99d2ae55e9a38f2f691189b388e836dc.png

825c82a2e0a7b358a3326f10cdb3b36c.png

9b3d4cc38efa348817b7a25f5d286551.png

b804650f856fa40d3daf6ece211c6769.png

ecf320c0335b8e70d85e5fb5b292e1d7.png

1d1fff36f04638bf8fc2d88430dc4249.png

推荐阅读:

世界的真实格局分析,地球人类社会底层运行原理

不是你需要中台,而是一名合格的架构师(附各大厂中台建设PPT)

企业IT技术架构规划方案

论数字化转型——转什么,如何转?

华为干部与人才发展手册(附PPT)

企业10大管理流程图,数字化转型从业者必备!

【中台实践】华为大数据中台架构分享.pdf

华为的数字化转型方法论

华为如何实施数字化转型(附PPT)

超详细280页Docker实战文档!开放下载

华为大数据解决方案(PPT)

d9cd957f2864d746dbfa6a1949f811b1.png

  • 1
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值