大数据学习之路

万字长文，纯干货，建议收藏阅读。

大纲：
一、开篇致辞
二、为什么要学大数据
三、学习大数据门槛
四、学习路线 & 独家干货（学生、在职、零基础）
五、推荐书单
六、Q & A

一、开篇致辞

我今年大四，大二的时候先后在厦门的两家小公司实习 Java，大三的时候在 Apche Kylin 的贡献团队 Kyligence 实习，现在在一家西班牙集团就职大数据开发。

首先感谢我大二的第一份实习，它是我职场上的启蒙之旅，以致我后面的一个技术视野和意识都比身边同学高一些。这也是我为什么一直推荐越早实习越好，能出去实习就别待学校里。

其次是 Kyligence 的实习，Kyligence 的技术应该是代表中国的 Top of Technology，在那里对开源技术有了新的认知和对技术的热忱。虽然现在实习结束了，但是「high bar」、「宁愿 … 也不 …」等理念和思想都已经深深地印在脑海里，对我的技术生涯有很大的影响。

由于一路都是自己摸爬滚打过来的，而我又是一个喜欢总结且善于总结，喜欢分享且善于抽象事物的人，所以在去年春招建了一个学习群，分享一些学习路线、面试经验、学习资料以及我在实习过程中总结的一些东西。

目前这个群转型成功的案例也有100多个了，有零基础转开发，开发转大数据的等等。不得不说，分享是会倒逼自己成长，很多时候他们问的一些问题是我没想过的，也还没有机会遇到过的，但是我还是会提供一些思路和参考，最后有些成功了有些遇到新的问题然后再及时调整，最后也成功了。所以我在这个过程中积累了大量的经验，这篇文章也系统的分析一下。

二、为什么要学习大数据？

在我第一份实习的时候，忘记在什么场景下我 leader 突然说了一句：「干 Java 不就是增删改查嘛」，而恰好那时候知乎都是「干了3年Java，还是只会增删改查，迷茫」等问题 ，我听完 leader 那句话就心里一颤。

因为这句话，我又一次的陷入迷茫，我不清楚自己是不是应该继续的 Java，所以那段时间我干过爬虫，也撸了一阵子的西瓜书和统计学什么的。在知乎上所有相关的问题和答案我都看了，也在知乎付费咨询了很多前辈。最后觉得爬虫工作不好找，机器学习门槛太高，然后折中学了大数据。

上面只是我的初步动机，但后面一年多的接触，让我有了更多的理由对大数据不抛弃不放弃。

1.门槛。它比 Java 高一点，因为除了对数据库的操作之外，要学习大数据生态的东西，需要会分布式、数仓、中间件等知识。它比机器学习低一些，不需要你会很多的机器学习算法和数学知识，而像机器学习算法和数学知识是需要长时间的磨练和沉淀，所以做这块的研究生和博士居多。

因为它的学习门槛比 Java 高，所以市场上缺失这方面的培训机构，因为投入和回报不成正比，而现有的培训机构大部分都是糊弄的，让你学学 Python 爬爬数据然后自称大数据培训。

再就是高校