Apache Hadoop简介

1.Hadoop介绍

Hadoop是Apache 旗下的一个用java语言实现开源软件框架，是一个开发和运行处理大规模数据的软件平台。允许使用简单的编程模型在大量计算机集群上对大型数据集进行分布式处理。

狭义上说，Hadop指Apache这款开源框架，它的核心组件有：

HDFS（分布式文件系统）：解决海量数据存储

YARN（作业调度和集群资源管理的框架）：解决资源任务调度

MMPREDUCE(分布式运算编程框架）：解决海量数据计算

广义上来说，Hadoop通常愿指一个更厂泛的概念——Hadoop生态圈。

当下的Hadoop已经成长为一个庞大的体系，随着生态系统的成长，新出现的项目越来越多，其中不乏一些非Apache主管的项目，这些项目对HADOOP是很好的补充或者更高层的抽象。比如：

HDFS：分布式文件系统
MAPREDUCE:分布式运算程序开发框架
HIVE：磨于HADOOP到分布式数据仓库，提供基于SOL的查询数据操作
HBASE:基于HADOOP的分布式海量数据库