十亿级数据，如何实现秒级响应？

从Excel、报表系统到传统BI，企业数据分析工具进化的同时，背后需要支持的数据承载量也在以更快的速度一路攀升。

 

（各数据分析工具适合承载的数据量）

 

以一家连锁零售企业为例，如果门店有2000家，在售SKU有5000个，一天单店单品库存数据量就达到了1000万，一周就可能破亿。

 

为了能让性能跟上企业数据发展的速度，确保用户在亿级、十亿级数据集的基础上还能做丝滑的拖拽式数据分析和动态查询，同时又不会给IT人员带来额外的数据管理与运维压力。观远数据在2019开始研究基于海量数据计算查询的加速组件，并于2020年3月正式推出“极速分析引擎”黑科技功能，真正做到十亿级数据秒级响应。

 

 

“极速分析引擎”是嵌入在观远一站式智能数据分析平台中的一套计算查询加速组件，在集群模式下最快支持十亿级以上数据秒级响应速度。适用于零售行业大数据量、大宽表、高并发的数据分析情况，比如海量库存数据聚合分析与查询、订单分析、商品分析等场景。可以满足业务人员持续的探索式自助分析、即席查询、动态分析的需求，保持连贯的分析思路，打造沉浸式分析体验，深挖数据价值，高效洞悉业务。

 

“极速分析引擎”到底有多快？我们在实验室环境下做了一个性能测试。测试的机器为16核128G内存的单节点，未做加速组件的独立部署（