实时数仓建设实践——滴滴实时数据链路组件的选型

目录

前言

一、实时数据开发在公司内的主要业务场景

二、实时数据开发在公司内的通用方案

三、特定场景下的实时数据开发组件选型

3.1 实时指标监控场景

3.2 实时BI分析场景

3.3 实时数据在线服务场景

3.4 实时特征和标签系统

四、各组件资源使用原则

五、总结和展望

滴滴实时数据链路建设组件选型实践篇

---

   原文大佬介绍的这篇实时数据链路组件选型有借鉴意义的，这些摘抄下来用作沉淀学习。如有侵权，请告知~

前言

    随着滴滴内部技术栈的不断统一，实时相关技术组件资源的不断整合，各业务线实时数据相关开发经验的不断沉淀，基本形成了一套面向公司不同业务场景需求的最佳技术选型和具体落地方案。同时发现，大部分实时开发同学在做实时数据建设过程中会笼统的把实时数据建设等同于flink数据开发，常常把实时数据处理过程中的其他相关组件放在边缘位置，无法高效的整合数据处理组件来完成不同业务场景的实时需求。为此，从当前公司内的典型实时数据开发方案出发，整理了不同场景下的实时数据建设技术选型，帮助更好的进行实时数据建设，为业务持续输出高质量且稳定的实时数据价值。

一、实时数据开发在公司内的主要业务场景</