Apache Doris 用户案例库

最新推荐文章于 2024-07-16 19:31:16 发布
最新推荐文章于 2024-07-16 19:31:16 发布
阅读量460 收藏 1
点赞数 1
分类专栏： Doris 文章标签： 大数据 doris
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hf200012/article/details/126621652
版权

按行业分类

互联网

京东

Apache Doris 在京东广告平台的应用

Apache Doris在京东双十一大促中的实践

京东物流基于 Doris 的亿级数据自助探索应用

Apache Doris物化视图与索引在京东的典型应用

Apache Doris 在京东客服 OLAP 中的应用实践

京东搜索实时 OLAP 探索与实践

知乎基于 Apache Doris 的 DMP 平台架构建设实践

同程数科基于 Apache Doris 的数据仓库建设

货拉拉基于 Apache Doris 的 OLAP 体系演进

[]

百度

《Apache Doris 在百度商业大规模微服务全链路监控的实践》

Doris在用户画像人群业务的应用

基于Doris构建的小程序私域流量增长

百度爱番番实时 CDP 建设实践

知乎

知乎用户画像与实时数据的架构与实践

小米

基于Apache Doris的小米增长分析平台实践

Apache Doris 在小米集团的运维实践

美团

美团外卖实时数仓建设实践

搜狐

搜狐智能媒体数据仓库体系建设实践

快手

Doris on ES在快手商业化的最佳实践

中仑网络

Apache Doris 在中仑网络的应用实践

一点资讯

Apache Doris在一点资讯自媒体平台的应用

教育

新东方

新东方在线教育实时数仓的落地实践

作业帮

Doris在作业帮实时数仓中的应用&实践

网易有道

基于Doris的有道精品课数据中台建设实践

金融

天冕科技

Apache Doris 在 WeLab实时大数据平台的应用实践

交通物流

韵达

Apache Doris 在韵达物流领域的应用实践

蜀海

Apache Doris在蜀海供应链的实践

零售快消

特步集团

特步集团基于 Apache Doris 的零售数据仓库项目实践

##

按场景分类

高并发查询

Apache Doris 在京东广告平台的应用

Apache Doris在京东双十一大促中的实践

OLAP多维分析

京东物流基于 Doris 的亿级数据自助探索应用

Apache Doris物化视图与索引在京东的典型应用

Apache Doris 在京东客服 OLAP 中的应用实践

京东搜索实时 OLAP 探索与实践

Apache Doris在一点资讯自媒体平台的应用

Doris on ES在快手商业化的最佳实践

日志监控

《Apache Doris 在百度商业大规模微服务全链路监控的实践》

用户行为分析及用户画像

Doris在用户画像人群业务的应用

基于Doris构建的小程序私域流量增长

百度爱番番实时 CDP 建设实践

知乎用户画像与实时数据的架构与实践

基于Apache Doris的小米增长分析平台实践

实时数仓

Apache Doris 在中仑网络的应用实践

美团外卖实时数仓建设实践

Doris在作业帮实时数仓中的应用&实践

新东方在线教育实时数仓的落地实践

基于Doris的有道精品课数据中台建设实践

Apache Doris 在韵达物流领域的应用实践

Apache Doris 在 WeLab实时大数据平台的应用实践

数据仓库

搜狐智能媒体数据仓库体系建设实践

Apache Doris在蜀海供应链的实践

特步集团基于 Apache Doris 的零售数据仓库项目实践

hf200012
关注
专栏目录
【Doris】Apache Doris在网易互娱的应用实践（含案例、调优、治理）
m0_54252387的博客
07-09 1704
随着公司游戏业务的高速发展，越来越多的分析需求涌现，例如：各类游戏用户行为分析、商业智能分析、数仓报表等。这些场景的数据体量都较大，对数据分析平台提出了很高的要求。为了解决实时分析的时效性，同时又能保证数据快速写入和查询，需要一个合适的数据查询引擎来补充我们原有的架构体系。经过大量调研，Apache Doris 比较契合网易互娱游戏数据中心的整体要求，Apache Doris 具备以下优秀特性：MPP架构 + 高效列式存储引擎高性能、高可用、高弹性标准ANSI SQL支持支持多表Join支持MySQL协议支
【Doris】Apache Doris 在京东客服 OLAP 中的应用实践
m0_54252387的博客
07-12 421
引言Apache Doris 是一款开源的 MPP 分析型数据库产品，不仅能够在亚秒级响应时间即可获得查询结果，有效的支持实时数据分析，而且支持 10PB 以上的超大的数据集。相较于其他业界比较火的 OLAP 数据库系统，Doris 的分布式架构非常简洁，支持弹性伸缩，易于运维，节省大量人力和时间成本。目前国内社区火热，也有美团、小米等大厂在使用。本文主要讨论京东客服在人工咨询、客户事件单、售后服务单等专题的实时大屏，在实时和离线数据多维分析方面，如何利用 Doris 进行业务探索与实践。近些年来，随着数据
【遇见Doris】Apache Doris 在百度商业大规模微服务全链路监控的实践
ucanuup_的博客
02-06 184
...
应用实践 | 特步集团基于 Apache Doris 的零售数据仓库项目实践
ucanuup_的博客
03-15 849
...
【Doris】Apache Doris在京东双十一大促中的实践
m0_54252387的博客
07-11 369
航源主要负责京东的广告平台报表业务，京东的广告平台每天支撑了千万级以上的查询量，同时每天有百亿级的增量需要维护。所有的报表级查询需要毫秒级返回数据，场景主要包括报表查询、多维分析、日志分析等。以账户报表为例，京东的报表平台有如下特点：存储介质多、逻辑计算复杂且延迟敏感：一张报表中通常会有非常多的指标列，涉及多个存储介质（MySQL、Doris、Redis等），这些列都需要实时关联，且需要保证报表是毫秒级数据返回。聚合数据为主：与Doris的聚合模型场景贴合。对外业务，服务质量要求高：面对的客户是所有京东的广
Apache Doris 用户案例集
06-05
Apache Doris ，我们从过去一年间 Apache Doris 在互联网、金融、物流、零售等众多行业的用户应用实践中，精心挑选出更具代表性和更具启发意义的最佳实践，并收录在《Apache Doris 用户案例集》中。 20+ 万字技术...
Doris案例篇—云积天赫基于 Apache Doris 构建统一数仓的实践
最新发布
07-16 3万+
前期，我们只是在部分功能上使用了 Apache Doris，用 Apache Doris 替代了 Spark+Impala 来实现实时圈人功能，出乎意料的是，Apache Doris 投入使用之后效果极佳，新版架构的实时圈人业务平均每个任务耗时由 3~5 分钟降低到 10 秒左右，并且在人群落地方面，使用存储更小的 Bitmap 代替原来的人群落地为表，不仅数据管理方便，而且磁盘空间占用减少了 80% 左右。早期，大数据平台的主要目的是为了满足较为单一的 BI 数据看板及报表功能。
孵化器-doris：Apache Doris（正在孵化）
02-28
3.用户案例 Doris不仅可以提供高并发的低延迟点查询性能，还可以提供即席分析的高吞吐量查询。 Doris不仅提供批量数据加载，而且还提供近实时的微型批量数据加载。 Doris还提供高可用性，可靠性，容错性和可伸缩性...
Apache Doris技术及应用.pdf
06-23
Apache Doris是百度大数据部门研发的一个开源的MPP（Massively Parallel Processing）数据库，专门用于在线分析处理（OLAP）和数据仓库场景。它的前身是百度内部项目Doris，之后演变为OLAP Engine、Palo，最终成为了...
从ApacheDoris到SelectDBCloud下一代
11-08
【标题】"从ApacheDoris到SelectDBCloud下一代"揭示了一个关键的话题，即在大数据处理领域，技术如何从Apache Doris这种开源分析型数据库发展到SelectDB Cloud这样的云原生实时数仓。Apache Doris是一款高性能、...
初学者对doris安装及使用
02-12
对doris的安装进行了较为详尽的描述，针对不同系统和用户载安装过程中遇到的各个程序进行筛选，比较适合于doris初学者使用，在最有有实例说明。
Apache Doris 03|杂问题记录和案例测试
longqiancao1的博客
07-06 793
http://palo.baidu.com/docs/%E5%BC%80%E5%A7%8B%E4%BD%BF%E7%94%A8/%E5%85%B3%E7%B3%BB%E6%A8%A1%E5%9E%8B%E4%B8%8E%E6%95%B0%E6%8D%AE%E5%88%92%E5%88%86/
Apache Doris (三十五）：Doris Stream Load（2）-案例
qq_32020645的博客
07-23 542
抓紧订阅专题！后续执行Stream Load 导入任务后，我们会在Doris集群中会查询对应Stream Load任务的情况，默认BE是不记录Stream Load 记录，如果想要在Doris集群中通过mysql 语法来查询对应的Stream Load记录情况，需要再BE节点上配置enable_stream_load_record参数为true，该参数设置为true会让BE节点记录对应的Stream Load信息。
一文看懂Doris数据模型（含样例，建议收藏）
luckcxy的专栏
03-15 2507
一文看懂Doris数据模型，包含：3种模型总结，模型必备知识，以及3种模型场景体验。
Apache Doris在美团外卖数仓中的应用实践
勇往直前的专栏
04-09 1379
美团外卖数据仓库通过MOLAP+ROLAP双引擎模式来适配不同应用场景。MOLAP引擎使用了Apache Kylin。ROLAP我们经过综合考虑，选择了Apache Doris。本文将介绍Doris在美团外卖数仓的实践。 序言 本文侧重于以Doris引擎为“发动机”的数仓生产架构的改进与思考。在开源的大环境下，各种数据引擎百花齐放，但由于业务的复杂性与多样性，目前并没有哪个引擎能够适配所有...
应用实践 | Apache Doris 在网易互娱的应用实践
锋哥聊DORIS数仓
06-14 538
作者介绍：Pencil，网易游戏数据与平台的离线平台组高级开发工程师，目前负责 Trino (Presto)/Doris 等组件的开发和业务支持工作。离线平台小组目前为广州互娱的大数据离线计算提供了接近 EB 级别的大数据存储集群服务，以及 Hive/Spark/Presto/Doris/ClickHouse 等计算框架的开发与业务支持。随着公司游戏业务的高速发展，越来越多的分析需求涌现，例如：各类游戏用户行为分析、商业智能分析、数仓报表等。这些场景的数据体量都较大，对数据分析平台提出了很高的要求。为了解决
从 Storm 迁移到 Flink，美团外卖实时数仓建设实践
Ververica的博客
10-13 881
本文主要介绍一种通用的实时数仓构建的方法与实践。实时数仓以端到端低延迟、SQL 标准化、快速响应变化、数据统一为目标。在实践中，我们总结的最佳实践是：一个通用的实时生产平台+ 一个通用...
百度开源 Apache Doris (Incubating) 原理与实践
qq_35139965的博客
10-30 2985
Apache Doris简介 Doris（原百度 Palo）是一款基于大规模并行处理技术的分布式 SQL 数据库，由百度在2017年开源，2018年8月进入 Apache 孵化器。 本次将主要从以下三部分介绍Apache Doris. Doris定位：即 Doris所要面临的业务场景及解决的问题 Doris关键技术 Doris案例介绍 01 Doris定位 实时数据仓库Doris 产品定位 我们首先看一下Doris整个的定位。 MPP 架构...
Apache Doris技术实践
super_chenzhou
07-20 8523
Doris技术实践
基于 apache doris 的数据仓库平台架构设计
08-26
基于 Apache Doris 的数据仓库平台架构设计如下： 1. 架构模式： - 采用分布式架构模式，将数据仓库划分为多个节点，每个节点可以独立存储和处理数据，同时支持横向扩展，能够处理大规模的数据量和并发请求。 2. 数据存储层： - 使用分布式文件系统（如HDFS）存储数据，数据按照数据表的划分进行存储，支持数据的分片和复制，提高数据的可靠性和可用性。 - 数据以列式存储的方式存储，提高查询效率。 - 支持数据的压缩和索引，降低存储空间和提高查询效率。 3. 元数据管理： - 使用元数据管理系统（如MySQL）存储数据的元信息，包括表结构、分区、数据位置等。 - 元数据管理系统支持水平扩展，保证元数据的一致性和高可用性。 4. 查询引擎： - 使用分布式查询引擎，支持SQL语法，能够高效地执行复杂的数据查询和分析操作。 - 支持预编译和查询优化技术，提高查询性能。 5. 数据加载和导出： - 支持多种方式的数据加载和导出，如批量导入、实时流入、增量导入、导出到外部系统等。 - 支持数据的转换和清洗，提高数据的质量和一致性。 6. 安全性和权限管理： - 支持访问控制，可以对用户和角色进行权限管理，确保数据的安全性和合规性。 - 支持数据加密和身份认证，保护数据的机密性和完整性。 7. 可视化和监控： - 提供用户友好的可视化界面，方便用户管理和操作数据仓库。 - 支持实时监控和告警功能，及时发现和解决系统故障和性能问题。 总之，基于 Apache Doris 的数据仓库平台架构设计具备高可扩展性、高性能和高可靠性的特点，可以满足大规模数据处理和查询的需求，并提供丰富的功能和工具支持，帮助用户实现高效的数据分析和决策。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值