![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
数据开发
车前猛跑
车前猛跑,路无止境
展开
-
doris基本操作,08-实战,索引
目前的Doris支持两类索引内建的智能索引,包括前缀索引和ZoneMap索引。用户创建的二级索引,包括Bloom Filter索引和Bitmap倒排索引。原创 2023-12-27 04:30:00 · 813 阅读 · 0 评论 -
doris数据模型,07-Duplicate模型
Duplicate Key模型,导入数据时不会产生聚合,源数据不失真。如:对于日志分析,不在意多几条,少几条数据,只关心排序,这时候。的字段用来指示底层数据按照该字段。模型就有用武之地了。原创 2023-12-26 22:41:04 · 717 阅读 · 0 评论 -
doris数据模型,06-Aggregate(聚合模型)
将表中的列分为和。是数据的维度列,比如时间,地区等等。key相同时会发生聚合。是数据的指标列,比如点击量,花费等等。每个指标列还会有自己的聚合函数,如:sum,min,max,bitmap_union等。数据会根据维度列进行分组,并对指标列进行聚合。原创 2023-12-26 04:00:00 · 608 阅读 · 0 评论 -
doris基本操作,05-Rollup
Rollup类似于mysql的视图,区别在于视图并没有将数据独立存储,视图是逻辑上的连接。而Rollup将数据独立存储了,玩的是真的。当查询命中Rollup时,会从Rollup表里获取数据,提高查询效率。原创 2023-12-25 21:06:16 · 472 阅读 · 0 评论 -
doris基本操作,04-表结构的变更
因为doris完全兼容mysql协议,因此操作上基本与mysql没有太大区别,之需要注意与doris相关的关键字即可,如:预聚合,key等。原创 2023-12-25 12:40:16 · 593 阅读 · 0 评论 -
doris基本操作,03-导入数据-Broker Load
Broker load 是异步导入方式,支持的数据源取决于 Broker 进程支持的数据源。因为 Doris 表里的数据是有序的,所以 Broker load 在导入数据的时是要利用doris 集群资源对数据进行排序,相对于 Spark load 来完成海量历史数据迁移,对 Doris 的集群资源占用要比较大,这种方式是在用户没有 Spark 这种计算资源的情况下使用,如果有 Spark 计算资源建议使用 Spark load。原创 2023-12-24 20:42:09 · 624 阅读 · 0 评论 -
doris基本操作,02-创建复合分区表
数据文件table2_data内容如下,分隔符是竖线(|)原创 2023-12-24 17:13:05 · 523 阅读 · 0 评论 -
doris基本操作,01-创建表,插入数据
【代码】doris基本操作,01-创建表,插入数据。原创 2023-12-24 16:37:54 · 943 阅读 · 0 评论