hadoop介绍
yijiyong100
想飞的鱼....
展开
-
hadoop介绍(关于hadoop技术知识的学习笔记)
1.1 云平台hadoop基础信息 Hadoop[1]是一个能够对大量数据进行分布式处理的软件框架。主要是由HDFS和MapReduce组成。 1.1.1 hadoop概念 Hadoop是N个开源项目的总称[4]。主要是由HDFS和MapReduce组成。 HDFS是Google File System(GFS)的开源实现。 MapReduce是Goog原创 2013-09-12 09:03:31 · 10929 阅读 · 1 评论 -
hadoop生态系统
近些年来Hadoop生态系统发展迅猛,它本身包含的软件越来越多,同时带动了周边系统的繁荣发展。尤其是在分布式计算这一领域,系统繁多纷杂,时不时冒出一个系统,号称自己比MapReduce或者Hive高效几十倍,几百倍。有一些无知的人,总是跟着瞎起哄,说Impala将取代Hive,Spark将取代Hadoop MapReduce等。本文则从问题域触发,解释说明Hadoop中每个系统独特的作用/魅力以及转载 2014-02-28 19:45:33 · 784 阅读 · 0 评论