GBase 8a-MPP大规模并行计算技术

本文详细阐述了GBase8a MPPCluster的MPP技术,包括分布式并行计划器、高效执行计划、高可用设计(冗余机制、故障切换)和高性能扩展能力。讨论了其如何处理大规模数据、数据加载性能以及多租户隔离。
摘要由CSDN通过智能技术生成

GBase 8a的MPP大规模并行计算技术:

GBase 8a MPP Cluster 为非对称部署的联邦架构,GCluster Cluster 和GCware Cluster 单独部署为一个集群,最大节点数为 64,GNode Cluster 单独部署为一个集群,支持 300 个以上的节点部署,可处理 30PB 以上的结构化数据。

大规模并行计算

 GBase 8a MPP Cluster 采用 MPP 技术,主要特点有: 

1) 分布式并行计划器,结合集群特征,对算子行进分布式处理,生成适合的分布式执行计划;

2) 通过基于规则和基于代价的优化,保证执行计划的高效;

3) 调度器采用异步 IO 等技术,确保调度的高效、可靠;

高可用能力

GBase 8a MPP Cluster 通过冗余机制来保证集群的高可用特性:

1)   可提供 1 个或 2 个副本数据冗余;

2)   副本间数据自动同步;

3)   复制引擎自动管理数据同步;

4)   多分片机制降低节点故障的木桶效应;

5)   节点发生故障时,系统自动切换至其它节点进行工作,保证业务连续性;

6)   支持双活集群部署。

 集群副本数和分片数可进行灵活配置,可配置副本分片到集群的任意一个节点上,可以根据配置在主机性能高和存储空间大的节点分配更多的主本和副本。

 当节点出现异常时,可以将异常服务器

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值