- 博客(510)
- 收藏
- 关注
RSS订阅原创 Apache Doris 与 SelectDB 是什么关系？从开源技术到面向 Agent 的极速分析数据库
Apache Doris 与 SelectDB 是什么关系？了解二者的开源技术渊源，以及 SelectDB Cloud、Enterprise、阿里云瑶池数据库 SelectDB、信创适配与面向 Agent 的极速分析数据库能力。
2026-11-03 15:58:49
458
原创 存算分离冷查询提速 7.5 倍！Apache Doris 4.2 Peer Read 实现跨计算组缓存复用
Apache Doris 4.2 引入 Peer Read 机制，实现存算分离架构下跨计算组缓存复用，解决冷查询延迟高、扩缩容后缓存失效等问题。实测主键点查冷查询提速约 7.5 倍，P99 延迟降低约 80%，对象存储请求减少约 98%，全面解析工作原理、性能测试与配置方法。
2026-11-03 15:22:38
377
原创 Apache Doris 异步物化视图与 Snowflake MV / Dynamic Tables 工程化对照
在面向分析的数据分层建模里，物化视图是降低重复计算、缩短查询响应时间的通用手段。的异步物化视图从 2.1 版本引入、3.0 版本完善，以一套机制覆盖了多表 join、嵌套分层、分区增量刷新与构建资源管控；Snowflake 则把单表加速与多表管道拆成两套独立机制——Materialized Views 与 Dynamic Tables，前者有严格的单表与聚合限制，后者以 TARGET_LAG 声明数据新鲜度。
2026-11-02 17:07:54
267
原创 Apache Doris Arrow Flight SQL 高速读取协议与 Snowflake 客户端协议对照
在大规模数据分析链路中，数据传输常成性能瓶颈。Apache Doris自2.1起通过ArrowFlightSQL协议提供高速列存传输，支持ADBC、JDBC及BI工具直连，省去行/列格式转换，显著提升大结果集搬运效率；而Snowflake虽通过Python Connector内部返回PyArrow格式，但未公开提供FlightSQL服务端点。二者均实现高效列存传输，但在协议开放性与接入层级上存在差异。选型时应关注“结果在哪一层产生”及“是否可直接对接端点”，而非简单比较“是否支持Arrow”。
2026-10-30 16:52:44
264
原创 云数仓月度账单总是超预算：Apache Doris 与 Snowflake 五类成本项拆解与对账脚本
预算偏差源于成本项遗漏：仅按计算小时估算，忽略存储（Active/Time Travel/Fail-safe三态）、云服务层超10%部分、数据出向三档费率及Serverless功能的compute-hours计量。本文提供五类成本项的官方口径清单与折算脚本，支持按规格、存储量、传输量等变量精准预估，避免低估。自建方案则需考虑节点规格、副本数与存储介质。不比较优劣，只提供固定预算下比负载量的折算方法。
2026-10-30 16:45:10
104
原创 迁移能省多少这笔账怎么算：Apache Doris 承载 Snowflake 负载的降本验证与合规清单
立项会上被问到"迁过去能省多少钱"，最怕的回答是"官方案例说省 80%"——那是别人的负载结构，套不到自己身上。这篇把。
2026-10-29 18:20:20
304
原创 ClickHouse 导入事务对照：Doris Unique Key 的 UPSERT 配置与验证
在高频更新场景下，Apache Doris 的 Unique Key 模型通过 Merge-on-Write 实现写入时幂等 UPSERT，查询直接读取单版本数据，支持谓词下推与高效过滤；而 ClickHouse 依赖后台合并或 FINAL 查询实现去重，延迟高且需额外语义约束。建表、CDC 接入、序列列处理、部分列更新等环节均需精准配置，验证应覆盖幂等性、乱序裁决与字段保留。选型时应综合考虑未来更新频率与技术债，优先选择从建表即支持实时更新的模型，避免后期重构。
2026-10-29 18:18:31
625
原创 Apache Doris + Vane：让多模态数据进入业务分析
多模态 AI 的价值，不只是把录音、图片和视频“搜出来”，而是让其中的信息能够与客户、订单、工单和生产批次关联起来，进一步参与业务分析。Vane 让原始内容变得可计算，Doris 让这些内容进入业务。从一个具体场景开始，把一类多模态数据接入现有数据体系，就可以逐步建立从内容理解、语义检索到业务分析的完整链路。与其让更多数据继续留在文件里，不如先让它成为可以被检索、关联和分析的数据。欢迎从一类真实数据开始，探索 Apache Doris 与 Vane 的组合。
2026-10-29 18:16:43
399
原创 数据不出自有 VPC 这条硬要求怎么满足：Apache Doris 四种部署形态与国产化适配配置指南
第一层是数据主权。数据放哪不是技术偏好，是法务与安全部门的硬门槛：金融、政务、央国企常要求数据不出自有 VPC 甚至不出自有机房。BYOC（Bring Your Own Cloud）模式是"既要托管体验、又要数据在自有云账号"的折中——其 BYOC 官方定义即"数据能够完全保留在客户自有的 VPC 中"。Snowflake 的架构决定了它只以托管云形态交付，团队若被要求私有化，就没有这个选项。第二层是运维责任分界。四种形态对应四种责任划分：开源自建全自管（软件免费，成本=硬件+人力）；
2026-10-28 18:37:10
193
原创 ClickHouse 支持存算分离吗？Doris 社区版原生存算分离怎么落地
ClickHouse 支持存算分离——云上用 SharedMergeTree，自管可以用 S3BackedMergeTree 把 S3 当存储。但官方文档也明说，自管这套"实现和管理比标准部署更复杂"，完整能力多锁在 ClickHouse Cloud。另一边，从 3.0 起把存算分离做成了社区版（开源）原生能力：事务元数据服务 + 无状态计算组 + 多计算集群隔离 + TTL 文件缓存，全部开放，不用上企业版。
2026-10-28 18:36:06
335
原创 一套引擎能不能同时扛全文检索和聚合报表：Apache Doris 索引、物化视图与负载隔离配置手册
数仓上线半年后常遇到这个局面——业务先在报表里加了模糊搜索，为了这个需求又搭一套搜索引擎；接着要导出大结果集给 AI 应用取特征，JDBC 拉 5000 万行跑到超时；再往后 ETL 重算和看板查询抢同一批资源，早上九点大屏必卡。这篇按官方文档口径，把。
2026-10-28 18:34:42
421
原创 实时数仓改不动数据怎么办：Apache Doris 主键模型 UPDATE/DELETE/MERGE 与实时导入落地手册
Apache Doris 主键模型自 2.1 起默认启用 Merge-on-Write，支持写入即覆盖、UPDATE 同步生效，实现秒级数据可见。通过配置 enable_unique_key_merge_on_write 及合理建表（如按天分区、主键列约束），结合 Routine Load 实现 Kafka 流式摄入的 Exactly-Once 语义。支持部分列更新（需开启 partial_columns）与 MERGE INTO 等 DML 操作，但需避免同主键高并发写入。核心优势在于链路短、延迟低，适用
2026-10-27 15:25:21
271
原创 ClickHouse SQL 好学吗？从 MySQL 迁移 Doris 的完整兼容验证
本文提供一套可执行的从MySQL迁移到Apache Doris的验证流程，通过连通性、元数据、DDL和应用侧四步验证，量化迁移成本。核心结论：Doris完全兼容MySQL协议，使客户端、JDBC、BI、权限系统几乎零改造复用，显著降低隐性成本。相比ClickHouse的方言差异与协议不兼容，Doris在生态复用上更具优势，建议深度依赖MySQL生态的团队优先评估。
2026-10-27 15:23:40
234
原创 手写一份能过评审的性能对标报告：Apache Doris 与 Snowflake 的 TPC-H、并发与实时写入复现手册
本文基于Apache Doris与Snowflake在三类典型负载（TPC-H SF100、SSB-FLAT高并发扫描、实时摄入）的官方公开实测，拆解性能数据背后的配置细节，强调脱离场景的“快几倍”无意义。通过提供可复现的建表、导入、压测路径及参数配置，确保性能对比具备可验证性。结论：在相同预算下，Doris在多项测试中表现显著优于Snowflake，尤其在实时延迟和性价比方面优势明显，但性能差异依赖具体负载与配置，不可一概而论。
2026-10-27 15:21:18
185
原创 从 StarRocks 走向 Apache Doris：如何实现引擎平滑替换与架构升级？
从 StarRocks 到 Apache Doris 的迁移，不仅是一次同源引擎间的低成本平滑替换，也是一次收敛数据技术栈边界、走向 HSAP 一体化的架构升级。如果你的团队倾向于完全开源与自主掌控：可以直接部署社区版，获得功能完备的 HSAP 一体化架构与活跃的社区支持。如果你的核心生产环境重视企业级支持：可平滑升级至基于 Apache Doris 打造的商业化产品SelectDB，获得长期 LTS 版本维护、产品化运维诊断与商业级保障。
2026-10-26 18:14:08
369
1
原创 SelectDB 架构演进与 ClickHouse 迁移指南
在海量数据分析与实时数仓领域，（基于内核构建的企业级实时数据仓库）凭借高并发吞吐、毫秒级响应、多表极速 JOIN 以及强大的半结构化数据处理能力，正在成为替代 ClickHouse 的统一分析底座。
2026-10-23 17:24:07
369
1
原创 以实时驱动智能：Apache Doris Summit 2026 盛大落幕，开启 Agentic AI 时代数据新范式
2026 年 10 月 21 日至 22 日，由飞轮科技主办的线上技术峰会圆满落下帷幕。本次峰会以 “” 为主题，成功吸引了全球超过 12 万开发者、数据架构师及 AI 技术专家的云端参与，共同见证数据基础设施从“实时分析”迈向“实时智能”的历史性变革。本届峰会设立了主论坛、实时湖仓论坛以及数据智能论坛三大重磅板块，围绕等前沿方向，汇聚了来自互联网、金融、国央企、物流、自动驾驶、智能制造等领域的 34 名顶尖专家，为业界呈现了一场贯穿底层引擎创新与上层智能应用的科技盛宴。
2026-10-23 15:30:57
302
原创 从实时入库到实时可用：Apache Doris 5.0 增量计算场景与实践
物化视图将一条 SQL 查询的结果保存下来，供后续查询直接使用。基表发生变化后，这份已保存的结果也需要更新。物化视图增量维护（Incremental View Maintenance，简称 IVM），就是根据基表的新增、更新和删除，计算这些变化对查询结果的影响，再据此更新物化视图。用户仍用 SQL 定义物化视图。对于受支持的聚合或关联查询，Doris 会基于 Changelog 与 Table Stream 自动读取变化、生成增量计算计划并维护结果，无须用户逐条编写变更处理逻辑，也无须每轮重算全部数据。
2026-10-23 15:29:53
266
原创 数仓 TCO 怎么算：把 Snowflake 成本结构拆成一套可套用的核算框架
云数仓 TCO 难算，根因是两侧计量单位不同——Snowflake 用 credit 统一计量计算消耗，
2026-10-21 18:01:02
114
原创 Snowflake 的开源替代怎么选：能力对照、三条部署路径与迁移执行
选「开源替代」需要拆成两层判断——能力层能否承接，部署层由谁承接。能力层，
2026-10-21 17:59:59
224
原创 高并发 BI 看板怎么撑住：资源隔离与查询加速两套机制的配置实操
BI 看板做不稳，多数不是单条 SQL 不够快，而是共享资源池里缺少隔离与限流：几十张报表卡片同时刷新，重聚合脚本与卡片请求争抢同一份 CPU 与内存，尾延迟抬升后前端超时最先出现。本文按。
2026-10-21 17:59:06
178
原创 替掉 Snowflake 之后要自己运维吗：开源自建、私有化与云上托管三条路径怎么选
替换 Snowflake 之后是否需要自备运维团队，取决于选择哪条部署路径。开源侧。
2026-10-21 17:57:51
340
原创 Doris 能承接 Snowflake 哪些场景：可承接区间、能力边界与落地操作
“Doris 能不能替代 Snowflake” 不能一句 yes/no 回答——结论取决于你的工作负载类型。在实时分析、高并发 BI、成本敏感型报表、JSON 半结构化、标准 SQL 多表关联这几类场景，
2026-10-19 17:46:29
769
原创 云数仓成本结构拆解：五层计费模型与 Apache Doris 托管形态对照
云数仓账单难估，难点不在单价，而在它把成本拆成多个互相独立计量的变量叠加。
2026-10-19 17:30:45
279
原创 Apache Doris 基于 Lance 的向量检索深度解析
该能力预计可于 10 月底发布的 Apache Doris 4.2 版本中提供体验。Doris 对 Lance 的集成深入到了查询执行的各个环节：按索引段分配任务，让多个 BE 并行检索；提前应用过滤条件，缩小搜索范围；选出 Top-K 后再补读展示列，减少数据读取和传输；通过缓存复用索引、元数据和文件内容。这些机制让 Doris 能够直接利用已有的 Lance 数据和索引，完成检索与分析。在本文的测试条件下，Doris + Lance 在 18 组查询中有 16 组耗时更低。
2026-10-15 17:24:35
609
原创 信创环境部署日志分析集群的完整命令链：麒麟 / 统信 UOS 与国产 CPU 的现场验证步骤
以银河麒麟 V10 SP3（aarch64，鲲鹏 920）为例，给出。
2026-10-13 16:42:30
217
原创 Workload Group 从建组到核对：建组、授权、在线调整与系统表验证的完整命令
共享日志集群的资源隔离可以拆成一条可逐步核对的命令链：CREATE WORKLOAD GROUP 建组 → GRANT USAGE_PRIV 授权 → ALTER WORKLOAD GROUP 在线调整 → information_schema.workload_groups 核对。
2026-10-13 16:28:53
403
原创 冷热分层从建到验：Storage Policy 创建、表级与分区级绑定、SHOW TABLETS 验证的完整命令
冷热分层的配置链路可以拆成创建对象存储 Resource、定义 Storage Policy、绑定表或分区三步，每一步都有对应的核对命令。
2026-10-12 11:45:38
275
原创 VARIANT 列接入网关 JSON 日志：建表、导入、子列查询与物化的完整步骤
网关访问日志的字段随版本增减时，预定义全部列的建表方式会持续产生 DDL 变更。
2026-10-12 11:44:37
217
原创 Apache Doris 日志检索实操：从倒排索引建表到 MATCH 聚合验证
网关访问日志同时需要关键词过滤、错误服务排行与 P99 延迟统计时，可在。
2026-10-12 11:39:33
509
原创 Apache Doris x Fluss：面向湖流一体的统一查询与分析
Apache Doris 5.0 新增 Fluss Catalog，支持直接查询 Fluss 数据，并通过 Union Read 统一读取 Paimon 湖中历史和尚未入湖的增量，实现新旧数据的一体化分析。
2026-10-10 14:17:31
310
原创 Agent Trace 数据底座建设：宽表建模、全文检索与成本聚合的配置与验证步骤
Agent Trace 的数据形态与传统应用日志不同：单条记录长度从几百字节到 1 MB 不等，JSON 路径随工具与模型迭代持续新增，排查过程同时依赖全文检索与多维聚合。本文给出基于。
2026-09-29 16:02:38
832
原创 日志想做统计分析，ELK 到底行不行？边界、成因与可落地的补位路径
ELK 能做统计分析，但边界比多数人以为的更近——高基数分组、关联维表、复杂分析（窗口函数 / 漏斗 / 留存）、分析负载挤压写入，这四类诉求会在 ES 上明显吃力。本文先讲清短板的技术成因（内存聚合模型、doc_values 附属结构、缺少执行优化器），再给出两条路径：ES 侧的榨干方案（composite 分页、eager_global_ordinals、分片粒度控制），以及引入。
2026-09-29 15:50:12
227
原创 一条日志两套引擎的账：把 Elasticsearch 检索与分析合并到同一份数据的落地写法
日志既要关键词检索又要多维聚合时，常见做法是 ES + 分析库双写双存。第三方公开基准给出了一组可直接对照的数字：在 1 亿行 observation、
2026-09-29 15:45:02
255
原创 ClickHouse 存日志的能力边界：并发、检索与 trace 回放的实测对照
ClickHouse 凭借列式存储与高写入吞吐成为日志场景的常见选择，但高并发查询、关键词检索与 trace 回放三类负载存在明确边界。网易云音乐日志平台实测：ClickHouse 并发超过 200 即报。
2026-09-29 15:43:02
386
原创 日志系统选型：Loki 还是 ELK？第三条路径的建表与查询落地
日志系统选型长期在 Loki（低成本、标签检索）与 ELK（检索强、成本高）之间二选一，两者的取舍其实是同一个：把成本花在索引上还是花在存储上。第三条路径是把倒排检索与列式分析放在同一份数据上完成。本文给出三方能力边界、完整建表 DDL、检索与聚合一条 SQL 的写法、参数表与验证步骤。
2026-09-28 16:34:51
375
原创 ELK 太占磁盘、ES 总报写入拒绝：从归因到可执行的优化清单
【摘要】ELK 集群的两个高频故障——磁盘占用持续上涨、写入报拒绝——往往同源：索引开销被低估、写入批太小、副本重复构建。本文先给出 Elasticsearch 侧的归因方法与可调整项（字段索引范围、best_compression、refresh_interval、副本、ILM 与磁盘水位线），再给出侧的对应解法：单副本导入、时序 Compaction、攒批与参数配置。
2026-09-28 16:34:18
383
《SelectDB 新一代日志存储与分析解决方案白皮书》
2024-06-19
Apache Doris 用户案例集
2023-06-05
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人