数据库的封闭性

本文探讨了数据库的封闭性及其在OLTP和OLAP业务中的作用。封闭性导致ETL过程变得复杂,影响计算效率和数据实时性。提出将计算能力剥离,独立的计算引擎能解决部分问题,但高性能计算仍需关注数据存储。未来的数据组织可能走向无库形式,以开放计算和约定存储格式实现高效处理。
摘要由CSDN通过智能技术生成

我们知道,数据库的数据处理能力是封闭的。所谓封闭性,这里是指要被数据库计算和处理的数据,必须事先装入数据库之内,数据在数据库内部还是外部是很明确的。

数据库一般有 OLTP 和 OLAP 两个用途。对于 OLTP 业务来讲,因为要保证数据的一致性,而一致性只有在一个确定的范围内谈论才有意义,这样就自然就会带来封闭性:数据库系统将保证也只负责数据库内部的数据的一致性。

如果不关注 OLTP 业务,只关心 OLAP 业务时,数据库在逻辑上可以被理解成为数据仓库,而这样的数据仓库也顺便继承了这个封闭性。


数据库的名字中有个“库”字,即使不考虑 OLTP 业务,也会让人觉得它是个以存储为主要目的的产品。其实不然,在实际应用中,特别是在大数据场景下,数据库有相当多的作用是计算,对于 OLAP 业务几乎可以说是全部,其存储经常也是为了计算服务的。因为数据库的计算能力还不错,远远超过大多数其它软件产品,所以人们经常会为了计算目标而部署数据库。

但是,一个以计算为主要任务的产品,没必要绑定封闭性这样的特点。


计算能力的封闭性有什么坏处呢?

一个典型的现象就是 ETL 经常被做成 ELT 甚至 LET。ETL 中的 E 和 T 这两步事实上也是某种计算,如果计算能力被封闭到数据库之内的话,我们就只能先把数据装入库中才能计算了,因为无法计算库外的数据。然而 ETL 过程中的原始数据常常并不在库内,或者至少不在这个用于计算的数据库中,也可能存在于多个数据库。总之,都需要先做个同库动作之后才能再计算。

有点多此一举!

数据库的封闭性,相当于城市有个城墙,数据要进出也必须通过数据库的城门&

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值