Doris建表注意事项

最新推荐文章于 2024-10-03 20:53:10 发布
最新推荐文章于 2024-10-03 20:53:10 发布
阅读量410 收藏
点赞数 2
文章标签： 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/java_creatMylief/article/details/137492430
版权
本文探讨了数据库中的关键概念，包括分组聚合模型中value列的聚合限制，以及Range和List分区的不同列类型支持。重点强调了在分桶模型中，如何确定Key列的选择规则，特别是在Aggregate、Unique和Duplicate模型中。

摘要生成于 C知道 ，由 DeepSeek-R1 满血版支持， 前往体验 >

KEY

  1. 想要做key的字段必须是非空字段（NOT NULL）
  2. key字段必须从表的第一个字段开始选择，并且需要连续选择，不可跳跃选择
  3. eg: 表的字段为 a,b,c,d 四个字段，那么key只能选择a、ab、abc、abcd 四种

VALUE

  1. 分组聚合模型中，value列必须设置聚合方式
  2. 字符串类型无法进行sum

分区 KEY

  1. Range 分区支持的列类型：[DATE,DATETIME,TINYINT,SMALLINT,INT,BIGINT,LARGEINT]
  2. List 分区支持的列类型： [BOOLEAN, TINYINT, SMALLINT, INT, BIGINT, LARGEINT, DATE, DATETIME, CHAR, VARCHAR]
  3. 分区列可以是多列但必须是KEY 列 

分桶KEY

  1. 分桶列可以是多列，Aggregate 和 Unique 模型必须为 Key 列，Duplicate 模型可以是 key 列和 value 列。分桶列可以和 Partition 列相同或不同。
JNWsong
关注
【doris】应用篇（一）- 建库 建表
dongfenggujian的博客
05-26 281
本文介绍了Apache Doris数据库的建库建表操作。Doris支持三种表引擎：明细表（存储原始数据）、主键表（支持唯一键去重和更新）和聚合表（内置聚合函数）。建库操作与MySQL类似，支持设置副本分布。建表时需注意排序键设置，它直接影响查询效率。明细表使用DUPLICATE KEY，主键表用UNIQUE KEY实现数据去重，聚合表通过AGGREGATE KEY实现预聚合。文中还介绍了分桶策略、副本设置以及数据更新注意事项，建议事务性操作使用主键表，并提醒注意数据可见性延迟问题。
第4章 Doris数据库与表设计-4.2三种Doris数据模型的建表方式
yangjun_1985的博客
12-13 385
使用 CREATE TABLE 语句在 Doris 中创建一个表，也可以使用 LIKE 或 AS 子句从另一个表派生表定义。
Apache Doris 基础 -- 数据表设计（使用AUTO_INCREMENT）
chinusyan的专栏
06-04 1997
Apache Doris 基础 -- 数据表设计（使用AUTO_INCREMENT）
MySQL explain分析
maybeo的博客
07-18 360
MySQL --- explain关键词explain type字段explain table字段explain partitions字段explain select_type字段explain possible_keyskeykey_lenrowsextra 参看博客： https://segmentfault.com/a/1190000008131735 https://dev.mys...
Doris：数据库建表最佳实践
m0_37559973的博客
09-20 1945
Doris 数据表模型上目前分为三类：DUPLICATE KEY, UNIQUE KEY, AGGREGATE KEY。因为数据模型在建表时就已经确定，且无法修改。所以，选择一个合适的数据模型非常重要。
mysql sql总出错的一种可能 mysql关键字
chanllen的专栏
11-10 825
以下是mysql的保留关键字 ADD ALL ALTER ANALYZE AND AS ASC ASENSITIVE BEFORE BETWEEN BIGINT BINARY BLOB BOTH BY CALL CASCADE CASE
【大数据】Doris 数据库与表操作语法实战详解
热门推荐
congge_study的博客
10-03 2万+
Doris 数据库与表操作语法实战详解
从建表语句带你学习doris_表索引
上好佳的博客
04-15 1938
索引是所有数据库系统提高查询性能的一个重要手段，简单的说其作用相当于我们查询汉语词典的目录，通过部首或者拼音快速帮助我们定位到某个汉字。索引通过一定的组织格式能够快速定位到数据表中的数据。内建的智能索引，包括前缀索引和 ZoneMap 索引。用户手动创建的二级索引，包括倒排索引bloomfilter索引和ngram bloomfilter索引。不同于传统的数据库设计，Doris 不支持在任意列上创建索引。Doris 这类 MPP 架构的 OLAP 数据库，通常都是通过提高并发，来处理大量数据的。
Doris 全新分区策略 Auto Partition
08-07 1万+
自动分区在功能上基本覆盖了动态分区的使用场景，并带来分区规则前置的拓展，大大减轻了DBA 在管理数据时的工作负担。完成分区规则的定义后，大量的分区创建工作将全部由 Doris 自动完成。LIST 自动分区支持多列分区，每个自动创建的分区仅包含一个分区值，分区名长度不能超过 50。Auto List Partition 中，分区名的创建依赖某种特定的规则，对元数据维护具有特定的含义，长度 50 的分区名，所能包含的数据实际长度可能更短。RANGE 自动分区支持单个分区列，分区列类型必须为。
sql查询字段中有关键字报错
m0_47333020的博客
12-11 1704
错误截图 错误原因 group是字段名，同时又是关键字 解决方法 加上两个符号转义即可
DORIS - DORIS注意事项（一）
记录并分享
09-02 1039
DORIS使用过程中的注意事项。
Doris【数据模型】
xiayuhaisong的博客
03-02 1945
在 Doris 中，数据以表（Table）的形式进行逻辑上的描述。一张表包括行（Row）和列（Column）。Row 即用户的一行数据。Column 用于描述一行数据中不同的字段。Column 可以分为两大类：Key 和 Value。从业务角度看，Key 和 Value 可以分别对应维度列和指标列。
doris使用总结-持续更新
JustinMars的博客
07-16 827
Doris 建表修改规则。
Doris进阶介绍（二）
weixin_64261178的博客
07-02 1113
在Doris中，数据都以关系表（Table）的形式进行逻辑上的描述一张表包括行（Row）和列（Column）：Row，即用户的一行数据；Column，用于描述一行数据中不同的字段。Column 可以分为两大类：Key 和 Value。从业务角度看，Key 和 Value 可以分别对应维度列和指标列 在Doris的存储引擎中，用户数据首先被划分成若干个分区（Partition），划分的规则通常是按照用户指定的分区列进行范围划分，比如按时间划分。而在每个分区内，数据被进一步的按照Hash的方式分桶
记 doris - 开发问题与解决系列
a123147abc的博客
08-26 7584
doris - 开发问题与解决系列
Doris数据划分和数据模型
互联网知识分享
08-15 330
中心事实表包含了核心业务指标，而维度表包含了与事实表相关的维度信息。雪花模型是星型模型的扩展，它在星型模型的基础上将维度表进一步细化。范围划分将数据根据指定的列的范围进行划分，例如按照时间范围或者按照分区键的取值范围进行划分。哈希划分将数据根据指定的列进行哈希计算，然后根据哈希值将数据均匀地划分到不同的分片中。、订单金额和下单时间等字段，现在要对订单表进行范围划分，根据下单时间将数据划分为每个月一个分片。进行数据分析和查询之前，需要对数据进行合理的划分和组织。列的范围进行划分，每个月一个分片。
Apache Doris 基础使用(一)
野狼e族 的博客
04-01 2402
目录 1.1 创建数据库 1.2 建表 1.2.1 单分区 1.2.2 复合分区 1.3 导入数据 1.3.1 Broker 导入 1.3.2 Routine 导入 1.3.3 其他导入方式 1.1 创建数据库 ### 1.1 创建数据库 ```sql MySQL> CREATE DATABASE example_db; MySQL> SHOW DATABASES; +--------------------+ | Database | +-----
Apache Doris 基础 -- 数据表设计（数据模型）
chinusyan的专栏
05-28 2282
Apache Doris 基础 -- 数据表设计（数据模型）
doris 主键表建表
最新发布
04-16
<think>嗯，用户想在Apache Doris中创建主键模型的表。首先，我需要回忆一下Doris的数据模型类型。根据之前看到的引用，Doris有明细模型、聚合模型和主键模型。主键模型使用UNIQUE KEY来定义，确保主键的唯一性。 那用户的具体需求是创建主键表，应该需要指定UNIQUE KEY，并且注意主键列的非空约束。记得主键模型适合需要唯一性约束的场景，比如避免重复数据插入。 接下来，我需要检查语法是否正确。例如，CREATE TABLE语句的结构，ENGINE类型是否为OLAP，还有DUPLICATE KEY和UNIQUE KEY的区别。用户可能容易混淆明细模型和主键模型，所以需要明确说明使用UNIQUE KEY。 另外，主键模型在Doris的新版本中可能有变化，比如是否支持更多特性，或者是否有存储引擎的特定要求。需要确认示例中的语法是否适用最新版本，避免过时的信息。 可能还需要提到主键模型的优势，比如支持upsert操作，或者查询效率上的提升，这样用户能理解为何选择主键模型。同时，注意事项比如主键列不允许更新，必须为非空，这些也是关键点，避免用户在实际使用时出错。 最后，生成相关问题时要围绕主键模型和其他模型的区别、使用场景、性能优化等方面，帮助用户进一步了解相关知识。</think>### 在 Apache Doris 中创建主键模型的表 在 Apache Doris 中创建主键模型的表需通过 `UNIQUE KEY` 语法定义主键，并指定存储引擎为 `OLAP`。以下是具体步骤和示例： #### 1. 基础语法结构 ```sql CREATE TABLE [IF NOT EXISTS] 表名 ( 列名1 数据类型 NOT NULL, 列名2 数据类型, ... UNIQUE KEY(主键列1, 主键列2, ...) ) ENGINE=OLAP DISTRIBUTED BY HASH(分桶列) BUCKETS 分桶数量 PROPERTIES ("replication_num" = "副本数"); ``` #### 2. 关键说明 - **主键定义**：通过 `UNIQUE KEY` 指定主键列，主键列需满足 `NOT NULL` 约束[^2] - **数据模型特性**： - 主键唯一性约束，自动覆盖相同主键的旧数据（新数据替换旧数据） - 支持实时更新（UPSERT）操作 - 查询时自动选择最新版本数据 #### 3. 创建示例 创建一个用户行为日志表，以 `user_id` 和 `log_time` 为主键： ```sql CREATE TABLE user_log ( user_id BIGINT NOT NULL, log_time DATETIME NOT NULL, action_type VARCHAR(20), device_id VARCHAR(50), UNIQUE KEY(user_id, log_time) ) ENGINE=OLAP DISTRIBUTED BY HASH(user_id) BUCKETS 10 PROPERTIES ( "replication_num" = "3", "enable_unique_key_merge_on_write" = "true" ); ``` #### 4. 注意事项 - 主键列必须显式声明为 `NOT NULL` - 分桶列建议选择高基数字段（如用户ID） - 副本数 `replication_num` 需根据集群规模设置（默认3） - 参数 `enable_unique_key_merge_on_write` 控制是否启用写入时合并优化（建议开启）[^2]
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值