![](https://img-blog.csdnimg.cn/20201014180756757.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
Thpffcj
这个作者很懒,什么都没留下…
展开
-
Hadoop MapReduce & Yarn 详解
目录1. MapReduce1. MapReduce概述2. 编程模型3. 案例2. YARN1. YARN简介2. YARN原理3. YARN工作机制最后 1. MapReduce 1. MapReduce概述 Hadoop MapReduce 是一个分布式计算框架,用于编写批处理应用程序。编写好的程序可以提交到 Hadoop 集群上用于并行处理大规模的数据。 概念 面向批处理的分布式计算框架 一种编程模型:MapReduce程序被分为Map(映射)阶段和Reduce(化简)阶段 核心思想 分而治之原创 2020-05-16 22:56:52 · 611 阅读 · 0 评论 -
深入浅出分布式文件系统 HDFS
目录1. HDFS简介1. 概念2. 设计目标3. 优点4. 缺点2. HDFS原理1. HDFS 架构2. 文件系统命名空间3. 数据复制4. 数据复制的实现原理5. 副本的选择6. 架构的稳定性7. HDFS特点3. HDFS存储原理1. HDFS写数据原理2. HDFS读数据原理3. HDFS故障类型和其检测方法最后 1. HDFS简介 1. 概念 Hadoop分布式文件系统(Hadoop Distributed File System) 2003年10月Google发表了GFS(Google Fi原创 2020-05-16 17:47:50 · 433 阅读 · 0 评论