YARN
YARN 常见面试题
liu_542449630
这个作者很懒,什么都没留下…
展开
-
HDFS NameNode的高可用 面试版
NameNode HA架构图 核心组件 NameNode 主备切换主要由 ZKFailoverController、HealthMonitor 和 ActiveStandbyElector 这 3 个组件来协同实现: ZKFailoverController 作为 NameNode 机器上一个独立的进程启动 (在 hdfs 启动脚本之中的进程名为 zkfc),启动的时候会创建 HealthMonitor 和 ActiveStandbyElector 这两个主要的内部组件,ZKFailoverCon原创 2020-07-04 11:30:58 · 1853 阅读 · 2 评论 -
简述YARN中内存和CPU资源隔离机制 面试版
资源调度和资源隔离是YARN作为一个资源管理系统,最重要和最基础的两个功能。 资源调度:由resourcemanager完成 资源隔离:各个nodemanager完成 对于CPU而言,它是一种“弹性”资源,使用量大小不会直接影响到应用程序的存亡,因此CPU的资源隔离方案采用了Linux Kernel提供的轻量级资源隔离技术Cgroup。 YARN 中CPU被划分成虚拟CPU(CPU virtual Core),初衷是,考虑到不同节点的CPU性能可能不同,比如某个物理CPU的计算...原创 2020-07-04 11:21:57 · 542 阅读 · 0 评论