Doris 物化视图

最新推荐文章于 2024-06-24 13:27:17 发布
最新推荐文章于 2024-06-24 13:27:17 发布
阅读量529 收藏
点赞数
分类专栏： 博文分享 文章标签： 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/misayaaaaa/article/details/123877200
版权

为什么会有物化视图？

主要是为了满足用户，既能对原始明细数据的任意维度分析，也能快速的对固定维度进行分析查询的需求。

物化视图的定义：

查询结果预先存储起来的特殊的表

Doris 的物化视图特殊之处：

用户的查询会根据规则自动匹配到最优的物化视图

怎样选择最优：

根据前缀索引是否能匹配到，以及聚合程度的高低来选出一个最优的物化视图。

最后自动改写 SQL

细节：Doris核心功能介绍 -- 数据模型和物化视图、

​​​​​​四、Doris物化视图 - 天戈朱 - 博客园

MISAYAONE
关注
专栏目录
Doris物化视图
2401_84052244的博客
04-26 76
Doris 会根据当前查询的语句去自动选择一个最优的物化视图，从物化视图中读取数据并计算。其中 bitmap 和 hll 的聚合函数在查询匹配到物化视图后，查询的聚合算子会根据物化视图的表结构进行改写。创建物化视图是一个异步的操作，也就是说用户成功提交创建任务后，Doris 会在后台对存量的数据进行计算，直到创建成功。物化视图是将预先计算（根据定义好的 SELECT 语句）好的数据集，存储在 Doris 中的一个特殊的表。自动维护物化视图的数据会造成一些维护开销，会在后面的物化视图的局限性中展开说明。
Apache Doris (六十）： Doris - 物化视图
qq_32020645的博客
01-04 1650
🏡🚩 私聊博主：加入大数据技术讨论群聊，获取更多大数据资料。物化视图是将预先计算（根据定义好的 SELECT 语句）好的数据集，存储在 Doris 中的一个特殊的表。物化视图的出现主要是为了满足用户，既能对原始明细数据的任意维度分析，也能快速的对固定维度进行分析查询。在没有物化视图功能之前，用户一般都是使用 Rollup 功能通过预聚合方式提升查询效率的。但是 Rollup 具有一定的局限性，他不能基于明细模型做预聚合。物化视图则在覆盖了 Rollup 的功能的同时，还能支持更丰富的聚合函数。
Doris进阶——物化视图
weixin_59812175的博客
06-17 2466
Doris物化视图
Apache Doris 基础 -- 视图和物化视图
最新发布
chinusyan的专栏
06-24 2178
Apache Doris 基础 -- 视图和物化视图
Doris--物化视图
qq_46893497的博客
12-03 1442
的操作，也就是说用户成功提交创建任务后，Doris 会在后台对存量的数据进行计算，直到创建成功。首先要根据查询语句的特点来决定创建一个什么样的物化视图。并不是说物化视图定义和某个查询语句一模一样就最好。
Apache Doris 入门教程32：物化视图
sunjian286的专栏
08-19 1102
本文简要介绍如何在Apache Doris中使用物化视图
doris物化视图
qq_43118086的博客
05-19 1276
物化视图的使用场景有： 分析需求覆盖明细数据查询查询 对明细数据的任意维度上卷聚合分析 创建物化视图 通过下面命令就可以创建物化视图了。创建物化视图是一个异步的操作，也就是说用户成功提交创建任务后，DorisDB会在后台对存量的数据进行计算，直到创建成功。 CREATE MATERIALIZED VIEW 查看物化视图创建状态 由于创建物化视图是一个异步的操作，用户在提交完创建物化视图任务后，需要通过命令检查物化视图是否构建完成, 命令如下: SHOW ALTER MATERIALIZED VIEW FR
1-5+Doris物化视图、索引的典型应用案例.pdf
03-18
Doris 物化视图和索引的典型应用案例 Doris 是一个开源的分布式分析型数据库，旨在帮助用户快速处理海量数据，提供了物化视图和索引等功能，以提高查询性能和数据的一致性。下面将详细介绍 Doris 的物化视图和索引...
doris物化视图创建
03-21
下面是Doris物化视图的创建过程： 1. 首先，你需要确保已经安装和配置好了Doris集群，并且已经创建了相应的表。 2. 创建物化视图的语法如下： ``` CREATE MATERIALIZED VIEW AS SELECT FROM WHERE GROUP...
Doris--基础--5.3--物化视图
zhou920786312的博客
03-08 2664
第1层过滤，先判断查询Where中的谓词涉及到的数据是否能从物化视图中得到，也就是销售时间列是否在表中存在。第2层过滤，查询的分组列是否为候选集的分组列的子集，也就是销售员id是否为表中分组列的子集。则会导致这张物化视图的性价比不高，既占用了集群的存储资源，还不能为更多的查询服务。第3层过滤，查询的聚合列是否为候选集中聚合列的子集，也就是候选集中 是否存在SUM(sale_amt)，这里Base表和mv_1物化视图表均满足标准。根据查询的条件，从 候选集 的所有物化视图中，找到最优的物化视图。
Doris系列之物化视图操作
Allen_人工智能与大数据
08-20 1952
Doris系列之物化视图操作
猿创征文｜Apache Doris物化视图介绍
weixin_43914798的博客
06-17 1172
doris的物化视图是一种能够快速提高查询效率的预聚合机制，能够帮助用户解决大量频繁重复的查询效率瓶颈问题
Doris（16）：物化视图
u013938578的博客
04-24 740
动态分区是在 Doris 0.12 版本中引入的新功能。旨在对表级别的分区实现生命周期管理(TTL)，减少用户的使用负担。目前实现了动态添加分区及动态删除分区的功能。动态分区只支持 Range 分区。
Apache Doris物化视图介绍
锋哥聊DORIS数仓
08-09 1132
该文章是基于Doris核心开发工程师缪翎在2020年7月线上meetup的PPT整理 1.Doris概述 首先 Doris 一个MPP架构的，分析型的数据库产品。对于PB数量级的，结构化数据，可以做到亚秒级查询响应。使用上兼容 MySQL 协议，语法是标准的 SQL。本身不依赖任何其他系统，相比hadoop生态产品更易于运维。 应用场景包括：固定历史报表xxx 用户的原始数据，比如日志，或者在事务数据库中的数据，经过流式系统或离线处理后，导入到Doris中，供上层的报表工具或者数据分析师查询使用。
关于Doris的物化视图与异步物化视图
qq_42265608的博客
03-14 1100
Doris 的异步物化视图采用基于 SPJG (SELECT-PROJECT-JOIN-GROUP-BY) 模式结构信息的算法来进行透明重写。自动查询优化，而且支持join过程部分字段的优化以及异步刷新操作，异步刷新就是类似Mysql读写机制，记录日志，然后根据日志进行更新操作。而且是后台启动线程去操作，而不需要操作完成再返回成功。
Apache Doris :Rollup 物化视图
weixin_67024075的博客
05-28 859
而 bitmap_union_count 等于 bitmap_union 的结果求 count，所以如果查询中涉及到count(distinct) 则通过创建带 bitmap_union 聚合的物化视图方可加快查询。(10000,‘zss’,‘北京’,18,0,12345678910,'北京朝阳区 ',‘2017-10-01 07:00:00’),(10000,‘zss’,‘北京’,18,0,12345678910,'北京朝阳区 ',‘2017-10-01 08:00:00’),
Doris之rollup上卷及物化视图
weixin_45012397的博客
05-28 1356
通过建表语句创建出来的表称为 Base 表（Base Table,基表）在 Base 表之上，我们可以创建任意多个 ROLLUP 表。这些 ROLLUP 的数据是基于 Base 表产生的，并且在物理上是独立存储的。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

MISAYAONE

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值