最佳实践
文章平均质量分 95
SelectDB技术团队
现代化实时数据仓库 SelectDB,支持大规模实时数据上的极速查询分析。
官网:selectdb.com
交流论坛:ask.selectdb.com
展开
-
Apache Doris 在头部票务平台的应用实践:报表开发提速数十倍、毫秒级查询响应
Apache Doris 助力某头部票务平台构建实时数据仓库,全面覆盖报表开发需求,实现数字化经营。原创 2023-06-29 17:41:22 · 271 阅读 · 0 评论 -
同程数科基于 Apache Doris 构建统一实时数仓,查询提速数十倍!
同程数科基于 Apache Doris 构建统一实时数仓,自研一站式数据平台 Ark,实现数十倍查询提速!在任务开发、系统维护等方面均达到降本增效的收益与成果。原创 2023-06-24 17:10:46 · 665 阅读 · 0 评论 -
叮咚买菜基于 Apache Doris 统一 OLAP 引擎的应用实践
Apache Doris 作为叮咚买菜整体架构体系中的核心 OLAP 分析引擎,不论是作为数仓数据看板类的应用层、还是作为实时数据汇总结果接入层、或是作为 B/C 端服务数据提供方,均能够很好的满足业务需求。除此之外,Doris 使得我们无需在存储选型上耗费过多时间,大大缩短了开发的周期;同时,Doris 支持 MySQL 协议和标准 SQL ,大大降低内部人员的使用成本和门槛。未来,我们希望使用 Doris 支撑内部更多的业务场景,更大范围了提升工作效率。原创 2023-04-13 18:12:59 · 897 阅读 · 0 评论 -
从 ClickHouse 到 Apache Doris,腾讯音乐内容库数据平台架构演进实践
导读:腾讯音乐内容库数据平台旨在为应用层提供库存盘点、分群画像、指标分析、标签圈选等内容分析服务,高效为业务赋能。目前,内容库数据平台的数据架构已经从 1.0 演进到了 4.0 ,经历了分析引擎从 ClickHouse 到的替换、经历了数据架构语义层的初步引入到深度应用,有效提高了数据时效性、降低了运维成本、解决了数据管理割裂等问题,收益显著。本文将为大家分享腾讯音乐内容库数据平台的数据架构演进历程与实践思考,希望所有读者从文章中有所启发。作者:腾讯音乐内容库数据平台 张俊、代凯。原创 2023-02-20 16:03:07 · 7242 阅读 · 4 评论 -
打破数据孤岛,Apache Doris 助力纵腾集团快速构建流批一体数仓架构
当前 Apache Doris 的生产集群为 3 FE + 9 BE 组合, 已导入集团存量和增量数据的 60%以及部分 DW 数据生成,3 副本共占 44.4TB 的存储。依赖 Apache Doris 自身优异特性及其生态圈帮助我们快速构建了一套新的流批一体数据架构,平均每天实时入库的数据量达到上亿规模,同时支持上万个调度任务平稳运行,相比早期架构单表查询效率提升近 5 倍,数据导入效率提升近 2 倍*,内存资源使用率显著减少。原创 2023-02-08 19:05:52 · 832 阅读 · 0 评论 -
复杂查询响应速度提升10+倍,度言软件基于 Apache Doris 实时数仓建设实践
Doris 完美覆盖了原本需要多个技术栈才能实现的业务场景,极大地简化了大数据的架构体系。Doris 对 Join 支持较好,因此我们选择了将维度表放到 Doris 中进行维护,相较于之前在离线数仓中进行维护,明显地提高了开发的效率,并降低了数据出错的可能性,满足了业务上对维度表近实时更新的需求。Doris 支持 MySQL 协议和标准 SQL,开发人员学习成本低,上手简单,可以快速将原先的业务迁移至 Doris 上来。Doris 社区活跃,版本迭代速度快。在遇到任何问题时,都可以向社区求助,原创 2022-12-27 18:40:31 · 878 阅读 · 0 评论 -
并发提升 10 倍,运算延时降低 70%,领健从 ClickHouse 和 Kudu 到 Apache Doris 数仓升级实践
基于 Doris 的新数仓架构不再依赖 Hadoop 生态组件,运维简单,维护成本低。具有更高性能,使用更少的服务器资源,提供更强的数据处理能力。支持高并发,能直接支持 WebApp 的查询服务。支持外表,可以很方便的进行数据发布,将数据推送其他数据库中。支持动态扩容,数据自动平衡。支持多种联邦查询方式,支持 Hive、ES、MySQL 等得益于新架构的优异能力,我们所用集群从18 台 16C128G 减少到 12 台 16C128G,集群资源较之前节省了33%,大大降低了投入成本;原创 2022-12-13 18:16:21 · 1472 阅读 · 0 评论