hadoop
文章平均质量分 78
ZHANGJNWEI
这个作者很懒,什么都没留下…
展开
-
Yarn架构
1. ResourceManager(RM)RM 是一个全局的资源管理器,负责整个系统的资源管理和分配,它主要有两个组件构成:调度器:Scheduler; 应用程序管理器:Applications Manager,ASM。调度器调度器根据容量、队列等限制条件(如某个队列分配一定的资源,最多执行一定数量的作业等),将系统中的资源分配给各个正在运行的应用程序。要注意的是,该调度器是一个纯调度器,它不再从事任何与应用程序有关的工作,比如不负责重新启动(因应用程序失败或者硬件故障导致的失败),这些均原创 2020-09-10 06:46:45 · 153 阅读 · 0 评论 -
HDFS架构
Table of ContentsHDFS 2.0 的 HA 实现DataNodeNameNodeHDFS 2.0 的 HA 实现 Active NameNode 和 Standby NameNode:两台 NameNode 形成互备,一台处于 Active 状态,为主 NameNode,另外一台处于 Standby 状态,为备 NameNode,只有主 NameNode 才能对外提供读写服务; ZKFailoverController(主备切换控制器,FC):ZKFailo原创 2020-09-10 06:44:01 · 105 阅读 · 0 评论 -
Scala学习第二天
通配符:_until: 不包含上限的值编译scala文件:scalac Person.scala //生成Person.class javap Person.class//打印Person类的共有属性,使用 -private 打印私有属性函数定义---------------------------------------------原创 2017-01-10 17:45:05 · 311 阅读 · 0 评论 -
Scala学习第三天
------------>>>>>>>>>>>>>>>>>>>---------------------------------------------------->>>>>>>>>>>>>>>>>>>----------------------------------------应用程序对象----------------------------------------------原创 2017-01-11 18:06:45 · 296 阅读 · 0 评论