自定义博客皮肤VIP专享

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+
  • 博客(520)
  • 收藏
  • 关注

原创 让数据更易查、更好用:正泰集团基于 SelectDB 的 AI 应用实践

从智能异常诊断、数据资产混合检索到智能分析报告,揭秘正泰集团如何基于 SelectDB 向量检索、倒排索引和 AI Agent,推动企业数据平台智能化升级。

2026-11-18 17:14:59 221

原创 什么是 AI Agent 数据库?四类数据角色、核心能力与数据库选型指南

AI Agent 数据库并非单一技术,而是支撑记忆、知识检索、可观测与实时分析的复合数据基础设施。不同角色需匹配各异能力:长期记忆需语义召回,知识库依赖向量与全文检索,Trace 分析强调高吞吐写入与JSON处理,业务查询则要求低延迟SQL与聚合。Apache Doris / SelectDB 凭借原生向量索引、VARIANT半结构化支持、混合检索与MCP接入,可统一承载多类任务,尤其适合已有分析平台的企业复用底座,避免系统冗余。

2026-11-18 16:42:41 153

原创 多模态检索用什么数据库?向量、全文与 SQL 混合检索选型指南

多模态检索不一定需要专用向量数据库。如果业务主要是图片、音频、视频或文本的向量相似度召回,可以评估 Milvus、Qdrant 等专用向量数据库;如果需要将向量检索与关键词搜索、结构化过滤、业务数据关联及 SQL 聚合结合,Apache Doris 是值得优先评估的一体化数据库方案。

2026-11-18 16:25:31 334

原创 让变更流出 Doris:Apache Doris 5.0 基于增量计算的 CDC 技术解析

京东基于 Apache Doris 构建统一湖仓查询引擎,支撑日均百万级查询与 PB 级数据扫描。深入解析 Presto、StarRocks 迁移、分区裁剪、Split 调度、向量化执行及 AI Agent 混合负载优化实践。

2026-11-12 18:51:37 224

原创 SelectDB 是哪个公司的?是国产数据库吗?一篇讲清飞轮科技与 Apache Doris 的关系

SelectDB是飞轮科技推出的国产分析型数据库品牌,基于ApacheDoris技术体系,由原团队于2022年创立。它并非开源版ApacheDoris的简单复制,而是提供企业版、云服务及原厂支持的商业化产品。具备国产CPU(海光、鲲鹏等)和操作系统(麒麟、统信等)适配能力,满足金融、政务等领域信创要求。用户可根据需求选择开源版、企业版或云服务,实现从自研到托管的灵活部署。

2026-11-11 17:53:37 121

原创 AI Agent 的分析数据存在哪里?Trace、Prompt 与会话数据的存储选型

AI Agent 上线后,会持续产生 Trace、Prompt、模型输出、工具调用、会话记录和 Token 消耗等数据。这些数据既要支持故障排查时的关键词检索,也要支持按模型、工具、会话维度进行聚合统计。传统方案往往需要组合搜索引擎、分析数据库和对象存储,增加数据同步与运维复杂度。对于这类运行分析负载,

2026-11-11 17:51:55 512

原创 京东 Apache Doris 湖仓查询优化实践:从多引擎统一到百万级查询

京东基于 Apache Doris 构建统一湖仓查询引擎,支撑日均百万级查询与 PB 级数据扫描。深入解析 Presto、StarRocks 迁移、分区裁剪、Split 调度、向量化执行及 AI Agent 混合负载优化实践。

2026-11-11 17:38:52 469

原创 列式存储为什么适合分析类负载?原理、限制与日志场景应用

列式存储因按列组织数据,显著减少分析类查询中无关列的读取,结合高效压缩与向量化执行,提升宽表聚合性能。其优势源于存储布局、编码压缩与执行优化三层协同,但代价包括行重组开销、点查延迟及更新成本。适用性取决于查询列占比,日志分析场景可借助内建倒排索引实现检索与聚合一体化,是否合一需根据负载类型权衡。

2026-11-10 17:26:46 338

原创 数据不能出境的数仓选型与迁移落地:四问框架、可复算成本与迁移三段式

在数据主权约束下,数仓选型应聚焦“四问”可核验性:数据落位、控制实体、私有化能力、演进可控性。Apache Doris 通过自有机房与境内云部署、Apache 2.0 开源可审计、企业/开源双形态、社区透明演进,满足四问。迁移采用结构迁移、历史回灌、增量同步三段式路径,结合可复算数字(如成本降80%、性能超Snowflake 5-10倍)与落地语句,确保可验证、可追溯。关键参数与对照表支撑决策,规避合规与工程风险,实现安全可控的数仓替代。

2026-11-09 14:55:25 367

原创 Apache Doris 企业版怎么选?SelectDB 提供同源商业支持、私有化部署与信创适配

Apache Doris 企业版怎么选?了解 SelectDB 与 Doris 的同源关系、企业级商业支持、私有化部署、信创国产化适配,以及阿里云、华为云、腾讯云、AWS 云平台部署方案。

2026-11-05 18:11:08 424

原创 Apache Doris 与 SelectDB 是什么关系?从开源技术到面向 Agent 的极速分析数据库

Apache Doris 与 SelectDB 是什么关系?了解二者的开源技术渊源,以及 SelectDB Cloud、Enterprise、阿里云瑶池数据库 SelectDB、信创适配与面向 Agent 的极速分析数据库能力。

2026-11-03 15:58:49 511

原创 存算分离冷查询提速 7.5 倍!Apache Doris 4.2 Peer Read 实现跨计算组缓存复用

Apache Doris 4.2 引入 Peer Read 机制,实现存算分离架构下跨计算组缓存复用,解决冷查询延迟高、扩缩容后缓存失效等问题。实测主键点查冷查询提速约 7.5 倍,P99 延迟降低约 80%,对象存储请求减少约 98%,全面解析工作原理、性能测试与配置方法。

2026-11-03 15:22:38 444

原创 Apache Doris 异步物化视图与 Snowflake MV / Dynamic Tables 工程化对照

在面向分析的数据分层建模里,物化视图是降低重复计算、缩短查询响应时间的通用手段。的异步物化视图从 2.1 版本引入、3.0 版本完善,以一套机制覆盖了多表 join、嵌套分层、分区增量刷新与构建资源管控;Snowflake 则把单表加速与多表管道拆成两套独立机制——Materialized Views 与 Dynamic Tables,前者有严格的单表与聚合限制,后者以 TARGET_LAG 声明数据新鲜度。

2026-11-02 17:07:54 283

原创 Apache Doris Arrow Flight SQL 高速读取协议与 Snowflake 客户端协议对照

在大规模数据分析链路中,数据传输常成性能瓶颈。Apache Doris自2.1起通过ArrowFlightSQL协议提供高速列存传输,支持ADBC、JDBC及BI工具直连,省去行/列格式转换,显著提升大结果集搬运效率;而Snowflake虽通过Python Connector内部返回PyArrow格式,但未公开提供FlightSQL服务端点。二者均实现高效列存传输,但在协议开放性与接入层级上存在差异。选型时应关注“结果在哪一层产生”及“是否可直接对接端点”,而非简单比较“是否支持Arrow”。

2026-10-30 16:52:44 295

原创 云数仓月度账单总是超预算:Apache Doris 与 Snowflake 五类成本项拆解与对账脚本

预算偏差源于成本项遗漏:仅按计算小时估算,忽略存储(Active/Time Travel/Fail-safe三态)、云服务层超10%部分、数据出向三档费率及Serverless功能的compute-hours计量。本文提供五类成本项的官方口径清单与折算脚本,支持按规格、存储量、传输量等变量精准预估,避免低估。自建方案则需考虑节点规格、副本数与存储介质。不比较优劣,只提供固定预算下比负载量的折算方法。

2026-10-30 16:45:10 108

原创 迁移能省多少这笔账怎么算:Apache Doris 承载 Snowflake 负载的降本验证与合规清单

立项会上被问到"迁过去能省多少钱",最怕的回答是"官方案例说省 80%"——那是别人的负载结构,套不到自己身上。这篇把。

2026-10-29 18:20:20 304

原创 ClickHouse 导入事务对照:Doris Unique Key 的 UPSERT 配置与验证

在高频更新场景下,Apache Doris 的 Unique Key 模型通过 Merge-on-Write 实现写入时幂等 UPSERT,查询直接读取单版本数据,支持谓词下推与高效过滤;而 ClickHouse 依赖后台合并或 FINAL 查询实现去重,延迟高且需额外语义约束。建表、CDC 接入、序列列处理、部分列更新等环节均需精准配置,验证应覆盖幂等性、乱序裁决与字段保留。选型时应综合考虑未来更新频率与技术债,优先选择从建表即支持实时更新的模型,避免后期重构。

2026-10-29 18:18:31 639

原创 Apache Doris + Vane:让多模态数据进入业务分析

多模态 AI 的价值,不只是把录音、图片和视频“搜出来”,而是让其中的信息能够与客户、订单、工单和生产批次关联起来,进一步参与业务分析。Vane 让原始内容变得可计算,Doris 让这些内容进入业务。从一个具体场景开始,把一类多模态数据接入现有数据体系,就可以逐步建立从内容理解、语义检索到业务分析的完整链路。与其让更多数据继续留在文件里,不如先让它成为可以被检索、关联和分析的数据。欢迎从一类真实数据开始,探索 Apache Doris 与 Vane 的组合。

2026-10-29 18:16:43 405

原创 数据不出自有 VPC 这条硬要求怎么满足:Apache Doris 四种部署形态与国产化适配配置指南

第一层是数据主权。数据放哪不是技术偏好,是法务与安全部门的硬门槛:金融、政务、央国企常要求数据不出自有 VPC 甚至不出自有机房。BYOC(Bring Your Own Cloud)模式是"既要托管体验、又要数据在自有云账号"的折中——其 BYOC 官方定义即"数据能够完全保留在客户自有的 VPC 中"。Snowflake 的架构决定了它只以托管云形态交付,团队若被要求私有化,就没有这个选项。第二层是运维责任分界。四种形态对应四种责任划分:开源自建全自管(软件免费,成本=硬件+人力);

2026-10-28 18:37:10 203

原创 ClickHouse 支持存算分离吗?Doris 社区版原生存算分离怎么落地

ClickHouse 支持存算分离——云上用 SharedMergeTree,自管可以用 S3BackedMergeTree 把 S3 当存储。但官方文档也明说,自管这套"实现和管理比标准部署更复杂",完整能力多锁在 ClickHouse Cloud。另一边,从 3.0 起把存算分离做成了社区版(开源)原生能力:事务元数据服务 + 无状态计算组 + 多计算集群隔离 + TTL 文件缓存,全部开放,不用上企业版。

2026-10-28 18:36:06 342

原创 一套引擎能不能同时扛全文检索和聚合报表:Apache Doris 索引、物化视图与负载隔离配置手册

数仓上线半年后常遇到这个局面——业务先在报表里加了模糊搜索,为了这个需求又搭一套搜索引擎;接着要导出大结果集给 AI 应用取特征,JDBC 拉 5000 万行跑到超时;再往后 ETL 重算和看板查询抢同一批资源,早上九点大屏必卡。这篇按官方文档口径,把。

2026-10-28 18:34:42 456

原创 实时数仓改不动数据怎么办:Apache Doris 主键模型 UPDATE/DELETE/MERGE 与实时导入落地手册

Apache Doris 主键模型自 2.1 起默认启用 Merge-on-Write,支持写入即覆盖、UPDATE 同步生效,实现秒级数据可见。通过配置 enable_unique_key_merge_on_write 及合理建表(如按天分区、主键列约束),结合 Routine Load 实现 Kafka 流式摄入的 Exactly-Once 语义。支持部分列更新(需开启 partial_columns)与 MERGE INTO 等 DML 操作,但需避免同主键高并发写入。核心优势在于链路短、延迟低,适用

2026-10-27 15:25:21 284

原创 ClickHouse SQL 好学吗?从 MySQL 迁移 Doris 的完整兼容验证

本文提供一套可执行的从MySQL迁移到Apache Doris的验证流程,通过连通性、元数据、DDL和应用侧四步验证,量化迁移成本。核心结论:Doris完全兼容MySQL协议,使客户端、JDBC、BI、权限系统几乎零改造复用,显著降低隐性成本。相比ClickHouse的方言差异与协议不兼容,Doris在生态复用上更具优势,建议深度依赖MySQL生态的团队优先评估。

2026-10-27 15:23:40 238

原创 手写一份能过评审的性能对标报告:Apache Doris 与 Snowflake 的 TPC-H、并发与实时写入复现手册

本文基于Apache Doris与Snowflake在三类典型负载(TPC-H SF100、SSB-FLAT高并发扫描、实时摄入)的官方公开实测,拆解性能数据背后的配置细节,强调脱离场景的“快几倍”无意义。通过提供可复现的建表、导入、压测路径及参数配置,确保性能对比具备可验证性。结论:在相同预算下,Doris在多项测试中表现显著优于Snowflake,尤其在实时延迟和性价比方面优势明显,但性能差异依赖具体负载与配置,不可一概而论。

2026-10-27 15:21:18 194

原创 从 StarRocks 走向 Apache Doris:如何实现引擎平滑替换与架构升级?

从 StarRocks 到 Apache Doris 的迁移,不仅是一次同源引擎间的低成本平滑替换,也是一次收敛数据技术栈边界、走向 HSAP 一体化的架构升级。如果你的团队倾向于完全开源与自主掌控:可以直接部署社区版,获得功能完备的 HSAP 一体化架构与活跃的社区支持。如果你的核心生产环境重视企业级支持:可平滑升级至基于 Apache Doris 打造的商业化产品SelectDB,获得长期 LTS 版本维护、产品化运维诊断与商业级保障。

2026-10-26 18:14:08 380 1

原创 SelectDB 架构演进与 ClickHouse 迁移指南

在海量数据分析与实时数仓领域,(基于内核构建的企业级实时数据仓库)凭借高并发吞吐、毫秒级响应、多表极速 JOIN 以及强大的半结构化数据处理能力,正在成为替代 ClickHouse 的统一分析底座。

2026-10-23 17:24:07 379 2

原创 以实时驱动智能:Apache Doris Summit 2026 盛大落幕,开启 Agentic AI 时代数据新范式

2026 年 10 月 21 日至 22 日,由飞轮科技主办的线上技术峰会圆满落下帷幕。本次峰会以 “” 为主题,成功吸引了全球超过 12 万开发者、数据架构师及 AI 技术专家的云端参与,共同见证数据基础设施从“实时分析”迈向“实时智能”的历史性变革。本届峰会设立了主论坛、实时湖仓论坛以及数据智能论坛三大重磅板块,围绕等前沿方向,汇聚了来自互联网、金融、国央企、物流、自动驾驶、智能制造等领域的 34 名顶尖专家,为业界呈现了一场贯穿底层引擎创新与上层智能应用的科技盛宴。

2026-10-23 15:30:57 322

原创 从实时入库到实时可用:Apache Doris 5.0 增量计算场景与实践

物化视图将一条 SQL 查询的结果保存下来,供后续查询直接使用。基表发生变化后,这份已保存的结果也需要更新。物化视图增量维护(Incremental View Maintenance,简称 IVM),就是根据基表的新增、更新和删除,计算这些变化对查询结果的影响,再据此更新物化视图。用户仍用 SQL 定义物化视图。对于受支持的聚合或关联查询,Doris 会基于 Changelog 与 Table Stream 自动读取变化、生成增量计算计划并维护结果,无须用户逐条编写变更处理逻辑,也无须每轮重算全部数据。

2026-10-23 15:29:53 269

原创 数仓 TCO 怎么算:把 Snowflake 成本结构拆成一套可套用的核算框架

云数仓 TCO 难算,根因是两侧计量单位不同——Snowflake 用 credit 统一计量计算消耗,

2026-10-21 18:01:02 118

原创 Snowflake 的开源替代怎么选:能力对照、三条部署路径与迁移执行

选「开源替代」需要拆成两层判断——能力层能否承接,部署层由谁承接。能力层,

2026-10-21 17:59:59 230

原创 高并发 BI 看板怎么撑住:资源隔离与查询加速两套机制的配置实操

BI 看板做不稳,多数不是单条 SQL 不够快,而是共享资源池里缺少隔离与限流:几十张报表卡片同时刷新,重聚合脚本与卡片请求争抢同一份 CPU 与内存,尾延迟抬升后前端超时最先出现。本文按。

2026-10-21 17:59:06 182

原创 替掉 Snowflake 之后要自己运维吗:开源自建、私有化与云上托管三条路径怎么选

替换 Snowflake 之后是否需要自备运维团队,取决于选择哪条部署路径。开源侧。

2026-10-21 17:57:51 345

原创 Doris 能承接 Snowflake 哪些场景:可承接区间、能力边界与落地操作

“Doris 能不能替代 Snowflake” 不能一句 yes/no 回答——结论取决于你的工作负载类型。在实时分析、高并发 BI、成本敏感型报表、JSON 半结构化、标准 SQL 多表关联这几类场景,

2026-10-19 17:46:29 771

原创 Apache Doris 的时间旅行与快照能力:边界、替代路径与可落地操作

历史版本回溯在。

2026-10-19 17:43:30 419

原创 云数仓成本结构拆解:五层计费模型与 Apache Doris 托管形态对照

云数仓账单难估,难点不在单价,而在它把成本拆成多个互相独立计量的变量叠加。

2026-10-19 17:30:45 283

原创 日志场景 Elasticsearch 替换实操:建表、索引、写入链路与查询改写的完整参数

日志与可观测场景用。

2026-10-15 17:25:36 272

原创 Apache Doris 基于 Lance 的向量检索深度解析

该能力预计可于 10 月底发布的 Apache Doris 4.2 版本中提供体验。Doris 对 Lance 的集成深入到了查询执行的各个环节:按索引段分配任务,让多个 BE 并行检索;提前应用过滤条件,缩小搜索范围;选出 Top-K 后再补读展示列,减少数据读取和传输;通过缓存复用索引、元数据和文件内容。这些机制让 Doris 能够直接利用已有的 Lance 数据和索引,完成检索与分析。在本文的测试条件下,Doris + Lance 在 18 组查询中有 16 组耗时更低。

2026-10-15 17:24:35 614

原创 信创环境部署日志分析集群的完整命令链:麒麟 / 统信 UOS 与国产 CPU 的现场验证步骤

以银河麒麟 V10 SP3(aarch64,鲲鹏 920)为例,给出。

2026-10-13 16:42:30 230

原创 存算分离建表与 Storage Vault 配置全流程:日志集群从建库到弹性扩缩容的命令链

面向日志与可观测场景,

2026-10-13 16:41:07 94

原创 Workload Group 从建组到核对:建组、授权、在线调整与系统表验证的完整命令

共享日志集群的资源隔离可以拆成一条可逐步核对的命令链:CREATE WORKLOAD GROUP 建组 → GRANT USAGE_PRIV 授权 → ALTER WORKLOAD GROUP 在线调整 → information_schema.workload_groups 核对。

2026-10-13 16:28:53 406

《SelectDB 新一代日志存储与分析解决方案白皮书》

随着信息技术的飞速进步,企业面临着前所未有的系统复杂性和数据挑战。在此背景下,日志数据成为了企业洞察系统内部状态、监控网络安全以及分析业务动态的宝贵资源,构建高效的日志存储与分析平台至关重要。 作为基于 Apache Doris 打造的现代化数据仓库,SelectDB 不拘泥于传统数仓的限制,针对日志数据的特点引入了多项创新性技术,使用户可基于 SelectDB 构建开放、高性能、低成本、统一的日志存储分析平台,截止目前已在近百家行业内知名企业中落地。 本白皮书将深入解析 SelectDB 在日志存储与分析领域解决方案,包括: - 企业在日志存储与分析的应用场景与挑战 - SelectDB 如何突破传统方案局限性,构建新一代日志存储分析平台 - 全方位用户使用手册,从系统搭建、配置、优化到查询分析的详细操作指南 - SelectDB 核心技术揭秘,深度解析倒排索引与 Variant 数据类型 - 不同行业领域的真实案例,展示 SelectDB 在帮助企业解决日志存储分析难题、提升业务效率方面的显著成效

2024-06-19

Apache Doris 用户案例集

过去的一年势必是 Apache Doris 在发展历程中有着浓墨重彩的一年,凭借对技术创新的执着与用户体验的追求,Apache Doris 已俘获全球范围内超过 2000 家企业的认可,拥有了极为广泛的用户规模、在企业实时数据分析的多种场景中得到广泛应用,并在广大社区用户和开发者的支持下,一举成为全球数据库和大数据领域最为活跃的开源项目之一。 为了帮助更多人更好地使用 Apache Doris ,我们从过去一年间 Apache Doris 在互联网、金融、物流、零售等众多行业的用户应用实践中,精心挑选出更具代表性和更具启发意义的最佳实践,并收录在《Apache Doris 用户案例集》中。 20+ 万字技术干货,赋能企业构建高性能实时数据仓库,欢迎大家下载阅读!

2023-06-05

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人

提示
确定要删除当前文章?
取消 删除