B05 - 014、Hadoop发展简史

初学耗时：0.5h

注：CSDN手机端暂不支持章节内链跳转，但外链可用，更好体验还请上电脑端。

一、Hadoop发展简史

---

记忆词：

  ...

---

 B05 - 999、大数据组件学习② - Hadoop

---

 ギ 舒适区ゾ || ♂ 累觉无爱 ♀

一、Hadoop发展简史

• Hadoop 是 Apache Lucene 创始人 Doug Cutting 创建的。
• 最早起源于 Nutch，它是 Lucene 的子项目。
• Nutch 的设计目标是构建一个大型的全网搜索引擎，包括网页抓取、索引、查询等功能，但随着抓取网页数量的增加，遇到了严重的可扩展性问题：如何解决数十亿网页的存储和索引问题。
• 2003 年 Google 发表了一篇论文为该问题提供了可行的解决方案。
• 论文中描述的是谷歌的产品架构，该架构称为：谷歌分布式文件系统（GFS）,可以解决他们在网页爬取和索引过程中产生的超大文件的存储需求。
• 2004 年 Google 发表论文向全世界介绍了谷歌版的 MapReduce 系统。
• 同时期，Nutch 的开发人员完成了相应的开源实现 HDFS 和 MAPREDUCE，并从Nutch 中剥离成为独立项目 HADOOP，到 2008 年 1 月，HADOOP 成为 Apache 顶级项目，迎来了它的快速发展期。
• 2006 年 Google 发表了论文是关于 BigTable 的，这促使了后来的 Hbase 的发展。
• 因此，Hadoop 及其生态圈的发展离不开 Google 的贡献。

床前明月光，疑是地上霜。

- - - - - - - - - - - - - - - - - - - - - - - - - - - -

＾ 至此，Hadoop发展简史完成。

- - - - - - - - - - - - - - - - - - - - - - - - - - - -

※ 世间诱惑何其多，坚定始终不动摇。

根据数据抽象的级别定义了四种模型：概念数据模型、逻辑数据模型、外部数据模型和内部数据模型，其中抽象级别最高的是________。

…
概念数据模型。

床前明月光，疑是地上霜。

- - - - - - - - - - - - - - - - - - - - - - - - - - - -

注：CSDN手机端暂不支持章节内链跳转，但外链可用，更好体验还请上电脑端。

我知道我的不足，我也知道你的挑剔，但我就是我，不一样的烟火，谢谢你的指指点点，造就了我的点点滴滴：）！

床前明月光，疑是地上霜。