大数据Apache Druid（二）：Druid数据结构及架构原理

文章目录

Druid数据结构及架构原理

一、Druid数据结构

二、Druid架构原理

1、四类节点

2、三个外部依赖

3、​​​​​​​​​​​​​​数据写入及读取原理

---

Druid数据结构及架构原理

一、Druid数据结构

Druid中的数据存储在datasource中，类似RDBMS中的table，每个datasource中按照时间划分，每个时间范围称为一个chunk(一般一天为一个chunk)，在一个chunk中数据根据维度的Hash或者范围被分成一个或者多个segment，每个segment都是一个单独的文件，通常包含几百万行数据，这些segment是按照时间组织成的，所以在按照时间查询数据时，效率非常高。实际上，datasource和chunk都是抽象的，Druid底层存储就是Segment，一旦一个Segment生成后就无法被修改，只能通过生成一个新的Segment来代替旧版本的Segment。