GBase 8a MPP Cluster从集群设计和节点内部设计的2个层面实现大并发的响应能力。
在单个节点上,GBase 8a MPP Cluster可充分利用多核多线程资源并行计算,并通过列存储、智能索引、自适应压缩等大大节约了单个SQL任务处理的I/O消耗,从而增加可以同时执行的SQL任务数。进行对海量数据的查询时,I/O是性能的瓶颈,GBase 8a MPP Cluster通过上述一系列技术,大幅降低了I/O,提升了查询性能,提升并发能力。经测试单节点可支持大于100并发。
GBase 8a MPP Cluster协调集群的每个协调节点均接收数据处理请求,通过前端的负载均衡机制(比如F5或数据库内置的软均衡负载),可以将大量的并发查询均匀的分摊到集群节点上,有效支撑大规模的并发查询。
GBase 8a MPP Cluster采用 MPP + Shared Nothing 的分布式联邦架构,具有很高的横向扩展性,数据处理并发能力可随节点数的增加而线性提升。
GBase 8a MPP Cluster在对数据进行删除时,会对要删除的数据设置无效标记,不做实际删除动作,而是通过后台进程定期对标记为无效的数据所占磁盘空间回收,因此数据删除性能非常高。
GBase 8a MPP Cluster 在对数据进行更新时,会将更新后的数据添加到列存储数据文件的末尾,而将被更新的数据打上无效标记,这样的处理方式不对已有的存储空间进行大的调整,所以可以保证执行速度;对于数据量较大的更新,即当更新数据量几乎涉及全表的数据时,GBase 8a MPP Cluster还可以提供另外一种更加快速的执行方式,这种快速方式下,会重新构造一个新的列数据文件,之后通过顺序处理的方式实现新构的列数据文件的生成,新生成的列数据文件将包含所有跟新后的最新数据。
GBase 8a MPP Cluster基于以上高性能数据删除和更新原理,经测试数据更新和删除速度能超过10000行/秒。