spark 与hadoop分开部署_「转」西瓜哥：凉凉的Hadoop，火火的后端存储

前言：在今年杭州举办的全球闪存峰会上，我有一个关于Hadoop存储的演讲，后来主办方DOIT把速记内容发布在其公众号上(详见西瓜哥：凉凉的Hadoop，火火的后端存储)，今天我转载到我自己的平台，方便我的读者。有需要我PPT的网友，请微信和我联系(公众号菜单里可以找到我个人微信)。

西瓜哥：凉凉的Hadoop，火火的后端存储

DOIT传媒 9月4日

8月22日-8月23日，2019全球闪存峰会(Flash Memory World)在杭州召开。著名存储专家、媒体人西瓜哥在ABC分论坛发表了《凉凉的Hadoop，火火的后端存储》的主题演讲。

西瓜哥：谢谢大家，今天我主要讲Hadoop的事情，但是我是做存储的，所以主要讲Hadoop后面存储的一些事情，还有我自己的一些观察。

“高端存储知识”，这是我的公众号，因为我是DOIT的常客，峰会也参加很多届了，估计来看我的，听我的人可能大部分还是知道，如果不知道就搜索一下“高端存储知识”加我的公众号就可以。公众号里面有我的个人微信。

这段时间自媒体很多文章说Hadoop不行了，Hadoop凉凉，为什么呢？有可能会看到两个巨大的Hadoop厂商合并了，Cloudera和Hortonworks，所有大家觉得是不是Hadoop不行了。

我讲讲我的想法，Hadoop其实就是一个开源项目，它是一个的框架，我们里面很多的部件我们都很熟悉。什么HDFS，现在又出了一个新的子项目叫对象存储的，他们现在也搞对象存储。应该是后来发现对象可能越来越流行，所以它也搞一些对象的东西。

Hadoop相关的项目很多，我们看得什么Hive、Spark其实都在里面，所以Hadoop是一个比较广义的东西，狭义的可能也就是那几个项目。但是广义的话，相关的东西还是很多的。

我们看业界Hadoop的发行版厂商也很多，除了公有云厂商，基本都在里面。阿里，Google、亚马逊都在里面，企业市场这边我们看到有国内的华为，国内的东方金信ÿ