应用案例背景
随着企业数据量的迅速增长和业务需求的不断演变,传统的数据仓库技术面临性能瓶颈和扩展性限制。为了应对这些挑战,企业启动了梧桐数据库小规模试点验证项目,旨在评估梧桐数据库的性能、扩展性、兼容性和总体拥有成本。
当前资产中心现网环境有4个oracle集群,支撑含日报、快报等B域大部分业务,资产中心数仓当前存在业务支撑方面存在性能瓶颈(过亿级表、多表关联时延达小时级)、硬件扩容困难(不支持按需扩展存算资源、不支持在线扩容)、集群间数据共享低效(集群间数据拷贝、dblink传输效率低)、以及产品建设成本高、非自主可控等问题。
从数仓技术架构演进和实现降本增效的需求出发,故开展本次“梧桐”国产数仓产品小规模验证,测试的目的是通过B域内的典型应用场景(资产中心)验证该产品能否支撑实际生产业务开展,同时与现有资产中心在用数据库的使用进行对比,为数据库选型提供依据。
注:当前资产中心业务一小时并发峰值存过达到300个,相对于标签生成客户群业务、位置实时处理业务,资产中心业务的作业并发度、任务数、单个作业处理逻辑复杂度(多表关联处理)更高,能够充分检验数据库系统能力。