实时计算
文章平均质量分 86
Smile波
小白程序员的架构师之路!
展开
-
kafkaStream对接doris如何解决数据发送顺序问题
本篇博客主要分享通过kafkaStream处理过的数据发送到doris如何处理数据顺序问题业务场景:实时统计快递订单及时揽收率并录入doris数据库先看下大致的数据来源:业务处理逻辑简介:首先先把订单数据和揽收数据发送到kafka的topic中,然后通过kafkaStream提供的各类窗口函数将数据源处理成自己需要的数据类型输出到其他topic中使用doris处理:对于相同的网点ID和揽收时间来说每次有新订单数据和新揽收数据过来对应的应揽件数,实揽件数和及时揽收率是实时.原创 2022-03-04 16:22:43 · 1947 阅读 · 0 评论 -
doris生产使用记录
Apache doris介绍:Apache Doris是一个现代化的MPP分析型数据库产品。仅需亚秒级响应时间即可获得查询结果,有效地支持实时数据分析。Apache Doris的分布式架构非常简洁,易于运维,并且可以支持10PB以上的超大数据集。Apache Doris可以满足多种数据分析需求,例如固定历史报表,实时数据分析,交互式数据分析和探索式数据分析等。令您的数据分析工作更加简单高效!一,镜像编译生产环境使用了百度的PALO-0.14.12.4版本,百度发行版本在百度内部进行过测试和上原创 2022-02-15 17:28:43 · 1757 阅读 · 0 评论