Druid集群的Broker节点主要负责客户端请求的路由和合并查询结果返回给客户端。Broker节点在启动时会加载zookeeper中segment的位置信息,在客户端请求到来时,会根据这些segment的位置信息,将请求路由到响应的historical节点或real-time节点。
每个Broker节点都有一个本地缓存,用来缓存最近查询的结果,并采用LRU失效策略来淘汰数据。
每次Broker接收到查询请求后,会将查询请求映射到缓存中的一组相应的segment上,部分segment可能存在缓存中,就无需重复计算;如果不存在,就会请求转发到相应的historical节点,一旦historical节点返回查询结果,就将这些segment放到缓存中,以供后续重复使用。整个过程如下图:
此外,Broker节点不会缓存Real-time节点的segment数据,因为Real-time节点的数据总是在变化的,做缓存无意义。所以查询请求总是被转发到Real-time节点。
对于Broker节点,如果在zookeeper变得不可用了,这些节点仍是可以提供查询的,只不过查询的是缓存中的数据。