大数据之Hadoop图解概述

• 2 Hadoop 发展历史（了解）

• 3 Hadoop 三大发行版本（了解）

• • ①Apache Hadoop（常用）

• ②Cloudera Hadoop

• ③Hortonworks Hadoop

• 4 Hadoop 优势（4 高）

• 5 Hadoop 组成（面试重点）

• • 5.1 HDFS 架构概述

• 5.2 YARN 架构概述

• 5.3 MapReduce 架构概述

• 5.4 HDFS、YARN、MapReduce 三者关系

• 6 大数据技术生态体系

• 7 推荐系统框架图

0 写在开头

========================================================================

开始更新Hadoop系列教学文章了，从零带你入门大数据，期待的你的关注❤️❤️

1 Hadoop是什么

=============================================================================

1）Hadoop是一个由Apache基金会所开发的分布式系统基础架构

2）主要解决，海量数据的存储和海量数据的分析计算问题。

3）广义上来说，Hadoop通常是指一个更广泛的概念——Hadoop生态圈。

2 Hadoop 发展历史（了解）

===================================================================================

1）Hadoop创始人Doug Cutting，为 了实 现与Google类似的全文搜索功能，他在Lucene框架基础上进行优

化升级，查询引擎和索引引擎。

2）2001年年底Lucene成为Apache基金会的一个子项目。

3）对于海量数据的场景，Lucene框 架面 对与Google同样的困难，存 储海量数据困难，检 索海 量速度慢。

4）学习和模仿Google解决这些问题的办法 ：微型版Nutch。

5）可以说Google是Hadoop的思想之源（Google在大数据方面的三篇论文）

• GFS —>HDFS

• Map-Reduce —>MR

• BigTable —>H