- 博客(2)
- 资源 (1)
- 收藏
- 关注
原创 Hadoop小白初识MapReduce-如何实现分布式计算简单介绍
简介mapreduce是如何实现分布式计算(执行流程) mapreduce由map阶段和reduce阶段组成,map的主要作用是“映射”,在处理数据任务时被称为mapper模块,reduce则表示为“归约”,其在计算时被称为reducer模块。 那mapreduce(简称**“MR”**)到底是如何进行超大数据量的分布式计算的呢? 首先我们需要介绍一下MR中的主要组成: (1).Mapper:映射...
2020-04-09 22:39:20 538
原创 Spark和Hadoop的区别(与Mapreduce的对比)
Spark和Hadoop的优缺点(Mapreduce的对比) Spark是一个可用于大规模数据处理的一个通用的引擎(核心),且支持多种语言(Java、Scala、python等),而Hadoop中使用的Mapreduce也是用于大规模数据的并行处理,但计算延迟较高,实时性差,满足不了快速计算。更适合离线大规模数据处理。 Hadoop是一个生态系统,所以一般我们所说的Spark和Hadoop的对比,...
2020-04-06 22:00:45 1388
Delphi物业管理系统.zip
2020-04-05
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人