Hadoop 的子项目

Hadoop 的子项目

Hadoop最出名的是 MapReduce及其分布式文件系统（HDFS），但还有其他子项目提供配套服务，其他子项目提供补充性服务。

这些子项目的简要描述如下。

Pig

    一种数据流语言和运行环境，用以检索非常大的数据集。Pig运行在MapReduce和HDFS的集群上。

Hbase

    一个分布式的、列存储数据库。HBase使用HDFS作为底层存储，同时支持MapReduce的批量式计算和点查询（随机读取）。

ZooKeeper

    一个分布式的、高可用性的协调服务。Zookeeper提供分布式锁之类的基本服务用于构建分布式应用。

Hive

    分布式数据仓库。Hive管理HDFS中存储的数据，并提供基于SQL的查询语言（由运行时引擎翻译成ManReduce作业）用以查询数据。

Chukwa

    分布式数据收集和分析系统。Chukwa运行HDFS中存储数据的收集器，它使用MapReduce来生成报告。