GBase 8a MPP分析型数据库集群并行加载

GBase 8a MPP Cluster 中,集群加载功能直接集成在 GBase 8a MPP Cluster 内部,提供了面向用户的 SQL 接口,集群和单机加载方式统一,支持如下功能:

支持从通用数据服务器拉取数据,支持 ftp/http/hdfs/sftp 等多种协议;
支持多加载机对单表的并行加载,最大化加载性能;
 支持普通文本、gzip 压缩、snappy 压缩、lzo 压缩等多种格式数据文件;
 支持普通文本与定长文本的加载(format 3 和 format 4)
 支持错误数据溯源功能,可以准确定位错误数据在源文件中的位置;
 加载性能可以随着集群规模的扩展而持续提升

加载的时候只写主分片,副本分片系统内部自动同步,性能大幅提升,可达30TB+/小时,同时加载方式简单,通过直接调用sql语句加载。流程如下图:

 

  • 3
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值