![](https://img-blog.csdnimg.cn/20201014180756724.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
大数据
chenliuzuo
这个作者很懒,什么都没留下…
展开
-
hadoop
https://zhuanlan.zhihu.com/p/19962491?columnSlug=donglaoshi转载 2016-12-13 10:20:22 · 218 阅读 · 0 评论 -
MapReduce相关一
基本特点易于编程、良好扩展性、高容错性、适合PB级别以上海量数据的离线处理不擅长的领域:实时计算:毫秒或秒级返回结果流式计算:输入数据是静态的,不能动态变化DAG计算:多个应用程序存在依赖关系,后一个应用程序的输入为前一个的输出编程模型一、将作业分为map和reduce两个阶段二、map由一系列maptask组成输入数据格式解析:InputFormat转载 2016-12-16 11:06:10 · 596 阅读 · 0 评论