目录
1.1 架构1.0 基于Kettle + MySQL离线数仓
1.2 架构2.0 基于 Presto / Trino统一查询
四、Doris助力信DolphinScheduler 和 Shell 贷业务场景落地
4.3 JSON统一存储+丰富解析函数,助力用户行为日志分析
原文大佬介绍的这篇助贷系统日志分析场景实践案例有借鉴意义,现摘抄下来用作沉淀学习。如有侵权,请告知~
前言
信贷业务转型过程中,随着系统规模不断扩大,腾梭科技决定引入 Doris实现业务升级。下文将详细介绍其信贷业务如何基于 Doris 在助贷系统日志分析场景的实践应用,实现毫秒级并发查询响应与极致存储性价比的性能表现。
一、早期架构演进
为了满足这些要求,腾梭科技历经三代架构演进。第一代架构基于Kettle + MySQL 离线数仓,第二代架构引入Trino进行统一查询,在经过两代架构使用后发现其性能的不足,最终通过产品调研选择 Doris 作为第三代架构核心进行数据统一存储与分析。本模块将详细介绍三代架构的演进历程和应用实践,分享业务场景落地经验。