2.1 Hadoop是什么
2.2 Hadoop发展历史
2.3 Hadoop三大发行版本
- 2.3.1 Apache Hadoop:入门学习最好
- http://hadoop.apache.org/releases.html
- 2.3.2 HDP(Hortonworks):大型互联网中用的多
- https://www.cloudera.com/downloads/cdh/5-10-0.html
- 2.3.3 CDH(Cloudera):文档较好
- https://hortonworks.com/products/data-center/hdp/
2.4 Hadoop的优势
- 高可靠性:Hadoop底层维护多个数据副本,某个计算元素或者存储出现故障,也不会导致数据丢失。
- 高拓展性:在集群间分配任务数据,可方便的扩展数以千计的节点。
- 高效性:Hadoop是并行工作的,以加快任务处理速度。
- 高容错性:能够自动的将失败的任务重新分配。
2.5 Hadoop1.x和2x的区别
- Hadoop1.x组成:MapReduce(计算+资源调度),Hdfs,Common
- Hadoop2.x解耦组成:MapReduce(计算),Yarn(资源调度),Hdfs,Common
,Yarn(资源调度),Hdfs,Common