GBASE 8a MPP 大规模并行计算技术1

GBase 8a MPP Cluster 为非对称部署的联邦架构,三大核心组件均可单独 部署,其中 GCluster 调度集群和 GCWare 管理最大节点数为 64,GNode 计算集 群支持 1000 个以上的节点部署,可处理 100PB 以上的结构化数据。

1.大规模并行计算

GBase 8a MPP Cluster 采用 MPP 技术,主要特点有: 

 1) 分布式并行计划器,结合集群特征,对算子行进分布式处理,生成适 合的分布式执行计划;

 2) 通过基于规则和基于代价的优化,保证执行计划的高效;

 3) 调度器采用异步 I/O 等技术,确保调度的高效、可靠;

2.高可用能力

GBase 8a MPP Cluster 通过冗余机制来保证集群的高可用特性:

 1) 可提供 1 个或 3 个副本数据冗余(3 个副本表示 1 个主分片和 2 个备 份分片); 

 2) 副本间数据自动同步; 

 3) 复制引擎自动管理数据同步;

 4) 多分片机制降低节点故障的木桶效应;

 5) 节点发生故障时,系统自动切换至其它节点进行工作,保证业务连续 性; 

 6) 支持双活集群部署。 

集群副本数和分片数可进行灵活配置,可配置副本分片到集群的任意一个 节点上,可以根据配置在主机性能高和存储空间大的节点分配更多的主本和副 本。 

当节点出现异常时,可以将异常服务器的负载均匀分布在副本所在的几台 正常的服务器上。

这样就最大限度防止由于故障切换后木桶效应而引起的显著 的性能抖动。 

节点故障对应用透明,不会中断正在执行业务,一旦故障节点恢复正常, GBase 8a MPP Cluster 会从其他节点上的数据恢复该节点数据,在完成更新后 立即提供服务。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值