YupDB万亿秒查之六脉神剑(下)

YupDB是一款针对海量数据的实时检索数据库,提供万亿数据量的秒级查询能力。通过读写分离(包括HDFS数据和索引文件的读写分离)优化了数据读取效率,并采用异步返回机制,允许部分数据分批返回,提升用户体验。这些技术手段确保了在高并发环境下,YupDB能有效处理数据写入与查询的冲突,提供高效的检索服务。
摘要由CSDN通过智能技术生成

YupDB万亿秒查之六脉神剑(下)

YupDB是面向海量数据背景下的多维度、高融合、企业级实时检索数据库。其具备万亿数据量下实时、多维、秒级检索及分析能力,同时还具备数据安全性及完整性高的特点。
YupDB是如何做到万亿数据秒级查询的呢?下面就来了解一下。

1、读写分离
- - - 在绝大多项目中是存在实时数据入库的。这意味着数据在一边生成一边写入数据库中,同时数据库肩负着响应线上系统的功能。在这种情况下,数据库同时支持数据写于数据读取,在有限的磁盘资源情况下,数据的读取于写入之间会相互争抢IO资源,从而相互之间会受到影响。
- - - YupDB在一定程度上解决了这个问题。在数据入库的同时将数据的写入与查询分离开,将两者分到了不同的磁盘上,以起到读写分离,从而减小两者之间的影响,加快数据的查询效率。
- - -具体分为两种读写分离。
A: HDFS数据的读写分离。

在这里插入图片描述
- - - 一个数据再写入HDFS时,会分别写入两个目录。每个目录单份数据副本且指定不同的磁盘存储。这些磁盘用于接收数据和当天数据的查询业务,一天以前的数据全部迁移到其他专制用于查询的磁盘上。以此实现读写分离。
B:索引文件的读写分离。
在这里插入图片描述
- - - 索引文件的读写分离同样会写两份数据,写入完成以后,一份数据处于在线模式,响应

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值