
大数据
文章平均质量分 56
大数据基础
一步一念
在路上
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
ECS单机部署Hadoop
hadoop 单机部署原创 2025-02-28 15:55:48 · 910 阅读 · 0 评论 -
Hadoop基础组件
中的资源抽象,它封装了某个节点上的多维度资源,如内存,CPU,磁盘,网络等,Yarn的任务运行在Container 中。存储文件的元数据(如文件名,文件目录结构,文件属性,块列表和DataNode等)MapReduce 把任务分为两阶段,即Map 阶段 和 Reduce 阶段。ApplicationMaster(AM 每个任务的管理)临时角色。Resource Manger(RM 整个YARN集群的管理)NodeManager(NM 单台节点的关联)每隔一段时间对NameNode元数据备份。原创 2023-03-14 21:34:02 · 77 阅读 · 0 评论