数据湖再识(02)

本文深入探讨了数据湖和数据仓库的区别,强调数据湖的全面数据存储、多样化的分析能力以及数据治理的重要性。澄清了关于数据湖的常见误解,指出数据湖不仅用于存储原始数据,而是支持所有数据类型和用户,提供更快的洞察力。此外,还讨论了数据湖与大数据平台的差异,以及数据湖在实际应用中面临的挑战和管理需求。
摘要由CSDN通过智能技术生成

数据湖再识

读者交流群已经开通了,有需要的可以私信进入读者交流群

前面我们说过用户需求驱动数据服务,一切新技术的诞生,时代都会赋予它特有的意义,当然数据湖也一样,数据湖作为大数据体系下的一员,时代又赋予了它什么样的意义呢?

数据[仓库] 数据[],既然都是数据存储的地方,又有什么不同呢 ? 下面我们将一一解答这个问题

开始之前请先阅读数据湖初识,了解一下为什么会出现数据湖

数据集成能力

数据湖需要具备完善的数据获取和数据发布能力,相比数据仓库数据湖的要求更高

数据湖需要能支撑各种各样的数据源,并能从相关的数据源中获取全量/增量数据;然后规范存储。数据湖能将数据分析处理的结果推送到合适的存储引擎中,满足不同的应用访问需求。

接入不同数据源,包括数据库中的表(关系型或者非关系型)、各种格式的文件(csv、json、文档等)、数据流、ETL工具(Kafka、Logstash、DataX等)转换后的数据、应用API获取的数据(如日志等&

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

不二人生

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值