Hadoop
Hadoop基础
九月木樨
00后程序猿,写博客只是为了记录自己的所学,以及工作或学习中遇到的问题。
展开
-
HDFS面试基础知识点
HDFS面试基础知识点HDFS 基本介绍HDFS角色作用简介HDFS分块存储抽象成数据块的好处块缓存HDFS副本机制名字空间(NameSpace)Namenode 功能Datanode功能机架感知HDFS文件读写流程文件写入过程文件读取过程数据完整性掉线时限参数设置DataNode的目录结构一次写入,多次读出常用命令实操HDFS的特性HDFS缺点Fsimage,Edits详解secondarynameNode如何辅助管理FSImage与Edits文件namenode元数据信息多目录配置 HDFS 基本介绍原创 2020-06-18 15:52:23 · 276 阅读 · 0 评论 -
Yarn基础知识
1、什么是Yarn 通用资源管理系统和调度平台 2、Yarn特点: 1、支持多计算框架 2、资源利用率高,运行成本低,数据共享。 3、Yarn的意义: 降低了企业硬件的成本(多个集群变成一个集群),减少了资源的了浪费,运营成本低。 4、Yarn基本组成 ResourceManager :一个集群资源调度的管理者 NodeManager :一个节点资源调度的管理者(集群各个节点资源的工作者) A...原创 2020-03-24 16:38:55 · 298 阅读 · 0 评论