Doris实践——同程数科实时数仓建设

目录

前言

一、早期架构演进

二、Doris和Clickhouse选型对比

三、新一代统一实时数据仓库

四、基于Doris的一站式数据平台

4.1 一键生成任务脚本提升任务开发效率

4.2 自动调度监控保障任务正常运行

4.3 安全便捷的可视化查询分析

4.4 完备智能的集群监控

五、收益与成果

六、未来规划

---

   原文大佬介绍的这篇Doris实时数仓建设有借鉴意义，现摘抄下来用作沉淀学习。如有侵权，请告知~

前言

     同程数科是同程集团旗下的旅游产业金融科技服务平台，近年来，随着同程数科业务的不断拓展和用户量的不断增加，越来越需要一个可靠、高效的数据中心，以帮助企业更好地了解业务运营情况和制定策略，这包括不限于建立实时业务报表看板，实时业务指标预警，营销用户画像与标签，以及金融风控实时监测等分析工具。因此，更加关注于实时数仓的构建，希望利用数仓帮助业务人员提升数据开发效率与质量，从而为业务分析提供强大的后盾。

   如今，数仓架构已经经历了三代演进，在经过第一代离线架构与第二代Lambda 架构的使用后，通过需求分析与调研，最终引入了Doris搭建统一的实时数据仓库。下文将详细介绍三代架构的演进过程，分享如何基于Doris 搭建一站式数据平台 Ark，以及如何在业务使用&#