ClickHouse学习笔记

CLICKHOUSE学习笔记

2016年Yandex的开源列式数据库，用于在线分析处理（OLAP），能够用SQL查询实时生成分析报告。

一、常用数据类型

1、整型

Int8,Int16,Int32,Int64

2、浮点型

float32 —float（相当于mysql）

float62 —double（相当于mysql）

Inf—正无穷

-Inf—负无穷

NaN—非数字

3、布尔型

没有单独的类型来存储布尔值，可以使用UInt8类型 ，限制取值为0或1

4、字符串

String–包含空字符串，可以任意长度

FixedString(N)—固定长度N的字符串，N为严格的正自然数

5、枚举类型

Enum8

Enum16

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-Pq5EimKf-1631236323411)(C:\Users\Alger\Desktop\数仓学习\CLICKHOUSE学习笔记.assets\image-20210909163217707.png)]

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-ZX2ywhAM-1631236323415)(C:\Users\Alger\Desktop\数仓学习\CLICKHOUSE学习笔记.assets\image-20210909163250431.png)]

6、数组

Array(T)—由T类型元素组成的数组

T可以是任意类型，包含数组类型，但不推荐使用多维数组

创建方式：array(T) \ []

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-30OULPBt-1631236323417)(C:\Users\Alger\Desktop\数仓学习\CLICKHOUSE学习笔记.assets\image-20210909163739373.png)]

7、元组

Tuple（T1，T2）—元组，每个元素都有单独的类型

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-KNTSIMgk-1631236323419)(C:\Users\Alger\Desktop\数仓学习\CLICKHOUSE学习笔记.assets\image-20210909163907326.png)]

8、Date

日期类型，用两个字节存储，表示从1970-01-01（无符号）到当前的日期值

二、表引擎

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-WB8AyyE0-1631236323420)(C:\Users\Alger\Desktop\数仓学习\CLICKHOUSE学习笔记.assets\image-20210909164147084.png)]

1、TinyLog

最简单的表引擎，数据存储在磁盘上，每列单独压缩存储，写入时将数据附加到文件末尾，不支持索引。

没有并发控制，不能同时读写，如果同时写入多个查询种的表，数据会被破坏。

适用于许多小表的情景。

create table t (a UInt16, b String) ENGINE=TinyLog;
insert into t (a,b) values (1,'abc');

2、Memory

内存引擎，数据以未压缩的原始形式直接保存在内存种，服务器重启数据就会消失。读写操作不会互相阻塞，不支持索引。简单查询下性能高。

3、Merge

本身不存储数据，但可用于同时从任意多个其它的表种读取数据。读是自动并行，不支持写入。读取时，被真正读取到数据的表的索引会被使用。

Merge引擎的参数：一个数据库名+一个用于匹配表名的正则表达式

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-aq89rE4b-1631236323422)(C:\Users\Alger\Desktop\数仓学习\CLICKHOUSE学习笔记.assets\image-20210909173653363.png)]

**4、MergeTree（合并树）

CK中最牛逼的引擎式MergeTree以及该系列的其它引擎。

有巨量数据要插入到表中，要高效地一批批写入数据片段，并希望这些数据片段在后台按照一定规则合并，相比在插入时不断修改（重写）数据进存储，这种策略会高效很多。

特点：

数据按主键排序

可以使用分区（如果指定了主键）（分区字段必须是Date格式的）

支持数据副本

支持数据采样

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-RPsOSA3C-1631236323422)(C:\Users\Alger\Desktop\数仓学习\CLICKHOUSE学习笔记.assets\image-20210909175739222.png)]

[IO的方式：直接IO,缓存IO]

create table mt_table(date Date ,id UInt8, name String