Hadoop是一个分布式处理软件框架，主要包括Hadoop Common、HDFS、MapReduce等组件。Hadoop Common提供基础工具，HDFS是分布式文件系统，MapReduce用于大规模数据处理。此外，Hadoop还包括Avro、Hive、HBase、Pig、ZooKeeper、Chukwa、Cassandra和Mahout等，分别涉及数据序列化、数据仓库、列存储数据库、数据流语言、协调服务、数据采集和机器学习等领域。
Hadoop是一个能够对大量数据进行分布式处理的软件框架，以一种可靠、高效、可伸缩的方式进行数据处理，其有许多元素构成，以下是其组成元素：
1.Hadoop Common：Hadoop体系最底层的一个模块，为Hadoop各子项目提供各种工具，如：配置文件和日志操作等。
2.HDFS：分布式文件系统，提供高吞吐量的应用程序数据访问，对外部客户机而言，HDFS 就像一个传统的分级文件系统。可以创建、删除、移动或重命名文件，等等。但是HDFS 的架构是基于一组特定的节点构建的（参见图 1），这是由它自身的特点决定的。这些节点包括 NameNode（仅一个），它在 HD
订阅专栏 解锁全文
扫一扫
713
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
