大数据
文章平均质量分 76
活到老&学到老
知行合一
展开
-
大数据—Hadoop生态圈
前言整理了一下目前常用的hadoop组件,后续将会对这些组件的具体应用场景和使用细节进行展开分析。如果大家发现有更好的建议欢迎大家在下方留言。原创 2021-10-28 11:40:33 · 1998 阅读 · 0 评论 -
大数据—impala元数据
前言这里主要介绍了关于Impala如何管理其元数据的原理,方便日后对其进行性能及可拓展性调优。Impala架构impala组成架构图如下:CatalogServer(Catalogd):负责元数据的获取和DDL的执行Statestore Server(Statestored):负责消息/元数据的广播ImpalaDaemon(Impalad):负责查询的接收和执行coordinator only:查询的接收,计划的生成,查询的调度executor only:数据的读取和计算coordi原创 2021-10-27 13:40:48 · 1608 阅读 · 0 评论