大数据--hadoop生态2--hadoop总结

 

目录

 一：Hadoop特性

二：Hadoop 2.x组成

三：hadoop的三种安装方式

四：Hadoop集群的配置和启动

五：一个基本的Hadoop集群中的节点主要有

六：hadoop1.x和2.x架构

七：hadoop1.0和hadoop2.0区别

---

 一：Hadoop特性

    高可靠性，高效性，高可扩展性，高容错性，成本低，运行在Linux操作系统上，支持多种编程语言。

二：Hadoop 2.x组成

​

其中MapReduce将计算过程分为两个阶段：Map和Reduce

1)   Map阶段并行处理输入数据

2）Reduce阶段对Map结果进行汇总

三：hadoop的三种安装方式

1）单机模式：只在一台机器上运行，存储使用本地文件系统，没有采用分布式文件系统HDFS；

2）伪分布式模式：存储采用分布式文件系统HDFS，但是，HDFS的名称节点和数据节点都在同一台机器上；

3）分布式模式：存储采用分布式文件系统HDFS，而且，HDFS的名称节点和数据节点位于不同机器上。