Big Data
文章平均质量分 83
Henzox
一个自称是搞技术的程序员!
展开
-
MapReduce
前言如果只谈 MapReduce,其实它只是一个编程模型,最早对应于由范畴论中态射和函子演化到的函数式编程中的概念,简单来讲就是一种函子(在编程中以函数形式出现)。想知道它的由来,可以看前面关于函数式编程的相关文章,这里只讲简单的模型,尤其是在 Hadoop 中计算框架中的实现。 先理清几个概念: 1. Hadoop,其实现在的 Hadoop 已经是一个大数据各种框架的统称了,主要包含 MapR原创 2017-09-26 22:26:22 · 527 阅读 · 0 评论 -
Flink 入门
写在前面的话 我会先假定你,在读这篇文章的时候,没有任何大数据处理基础,但懂一些编程概念以及 Java 语言基础。遇到一些数据处理问题,用现有方法可以解决,但总认为有一些通用的方案来做更合适,且听过 Spark, Storm, Flink 适合解决这个问题,又恰巧听说 Flink 比较先进,所以看到了这里。那么这篇文章是适合你的。先讲数据处理 假如,我们有一批数据,假设是一个源源不...原创 2018-04-13 18:04:29 · 7063 阅读 · 0 评论