Hadoop学习历程
文章平均质量分 77
介绍了在Hadoop学习过程中的重要知识点汇总
科班你宇哥
00后小菜鸡,处于21-25人生决定性阶段,长期目标掌握更多技术,年底目标先找份Web前后端工作
展开
-
YARN架构体系(组件,RPC通信协议,工作交互流程)入门理解
第四步:开辟出来的各个不同的NodeManager里面的任务通过对应的具体的RPC协议向ApplicationMaster汇报自己的状态和进度,用户可随时通过RPC向ApplicationMaster查询应用程序的当前运行状态。------ApplicationMaster:在RM的ASM接收到用户的job请求后,会向NM申请一个容器Container运行应用程序的ApplicationMaster(AM),这个人,它负责监控应用程序的所有信息。具体工作流程如下图(这个图非常的好)原创 2024-01-16 18:20:11 · 1469 阅读 · 1 评论 -
HDFS的EditLog和FsImage作用详细解析,超详细!(含部分非原创图片,大部分原创总结)
EditLog和FsImage的概念,以及与SecondaryNameNode的关系问题,以及EditLog和FsImage的重要性问题。原创 2024-01-15 17:32:10 · 1651 阅读 · 0 评论 -
分布式系统中JobHistoryServer服务和Timeline Server服务的配置和简要了解概述(不详细阐述,小服务模块)
简要概述了JobHistoryServer和TimelineServer服务的功能和配置以及区别原创 2024-01-17 14:15:03 · 706 阅读 · 0 评论