大数据架构OLAP技术选型

本文对比了OLAP数据库如AnalyticDB、Hologres、Doris、StarRocks和ClickHouse等在多表关联、多维查询、实时处理和功能集成等方面的技术需求,并介绍了各自的技术架构,重点关注MySQL兼容性和资源管理特性。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

OLAP数据库选型对比:
AnalyticDB(阿里)、Hologres(阿里)、Doris、StarRocks、ClickHouse、Hbase 、Presto(通过connector支持多数据源jion查询)

OLAP技术需求考虑:
1、多表关联:join支持
2、多维查询:性能(MPP,向量化执行引擎)、索引支持、物化视图、精确去重、高并发
3、实时导入/查询:update/partial update/delete(多路流jion场景),表列数限制(宽表场景、局部列更新场景需要考虑列数限制)

4、函数支持、湖仓一体(直接查询数据湖数据、数据冷热分离、兼容hive、oss、iceberg、hudi)、数据湖格式兼容、扩缩容、高可用、权限管理、

AnalyticDB MySQL 技术架构

Adb是融合数据库、大数据技术于一体的云原生企业级数据仓库服务、支持高吞吐的数据实时增删改查低延时的实时分析和复杂ETL、兼容上下游生态工具、可用于构建企业级报表系统、数据仓库和数据服务引擎等,java 开发的,兼容MySQL协议

接入层:负责和用户侧进行交互,接受查询请求解析SQL查询语句,生成并优化查询计划及任务调度
计算层:负责具体的任务计算逻辑执行
存储层:负责数据存储及扫描数据

产品形态:
弹性模式:存储计算分离,支持分别扩展、计算时弹性功能、计算资源组隔离功能

资源组
在弹性模式中
支持资源组隔离,资源池功能可以对计算资源进行弹性划分,不同资源池之间的计算资源在物理上完全隔离,通过AD

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值