Impala源码分析---1

最新推荐文章于 2024-09-24 09:45:48 发布

GeekFans

最新推荐文章于 2024-09-24 09:45:48 发布

阅读量9.4k

点赞数 1

分类专栏： Impala 文章标签： Impala 源码代码分析

本文链接：https://blog.csdn.net/jiadebin890724/article/details/38896389

版权

本文档开始深入Impala源码分析，首先概述了Impala的内部架构，包括client、Impalad和StateStore之间的关系。接着详细讲解了Impalad组件，特别是`Impalad-main.cc`文件，介绍了各端口的功能，如Beeswax、HiveServer2和内部通信端口。最后，提到了Impala代码的整体文件结构。

摘要由CSDN通过智能技术生成

2、Impala源码分析

参考链接：http://www.sizeofvoid.net/wp-content/uploads/ImpalaIntroduction2.pdf

本章开始进入源码分析阶段，参考链接是一篇非常好的impala实现、运行流程介绍的文档，感谢作者。

2.1 Impala内部架构

Impala内部架构图如下：

图2-1 Impala内部架构

从图中可以看出，Impala三个部分：client、Impalad、StateStore的关系。

组件	说明
Client	图中可以看到有三种，是Thrift客户端，用来提交查询，连接到Impalad的21000端口
Impalad	有frontEnd和backEnd两部分，包括三个Thrift Server（beeswax-server、hs2-server、be-server）
StateStore	各个impalad向其注册，然后它向各个impalad更新集群中其他节点的状态