Hadoop大数据学习的秘密模型

6年前，我研究生刚刚毕业，那时候我以为自己很懂，为了得到一个北京户口，我进入了一家高新技术企业，其实就是一家小公司，结果很悲催 ，一来没有什么技术深度，二来没有人带，一切靠自己摸索，进步非常缓慢，靠学校学的那些C、Java等语言，艰难的工作着。

在起初的工作中，大部分项目都涉及服务器开发，所以我又自学了Linux，说实话现在看来当时真的是浪费了大量的时间，加上工作上本身就很忙，分配给学习的时间往往都是碎片化的，学习的不系统和无人指导的摸索，基本上进步很慢。

总的来说，那一两年，没干出什么出色的成绩，效率低下从而浪费了大量时间。现在回过头来想当时那仅仅的“进步”，甚至不值一提。

偶然一次，我参加一次技术沙龙，发现居然有人只有一年工作经验，却拿着年薪20~30万的工作！！！比较着自己当时工资税前收入还不到1万元的差距，我觉得是时候做出改变了，于是我开始学习大数据处理和数据挖掘等相关知识。在项目空歇期间我看了大量书籍，为此还专门在海淀季海楼一层图书馆办了1年的借书卡。

但理想总会与现实产生差距，看了很多书，抓不到重点，另外技术这东西不是光看书就可以的，关键在实践，很多书籍所涉及实践部分不是泛泛地介绍，就是粘贴一堆不知道有用没用的代码，另外自己搭环境各种坑，与真实企业生产环境使用上差别多大，心里完全没谱，浪费了很多的时间。

【大数据开发学习资料领取方式】：加入大数据技术学习交流群522189307，点击加入群聊，私信管理员即可免费领取

 

有幸的是我底子还不错，另外在书店也认识了一位牛人，他就在附近的银科大厦上班，还出版过书籍，经过大半年的泡在图书馆，加上有人指点，慢慢的有了感觉。那段时间进步非常快，每天就是工作学习，大量的做试验，让我感受到了从未有过的充实快感。当然过程是痛苦的，自学最怕的就是遇到问题没人指点，在这期间我也悟明白一个道理：“别人的一句话指点胜过自己一天的摸索”。

 

直到2013年，我顺利的通过了百度的面试，进入了国内一流的互联网公司——百度，并且在公司最最核心的部门搜索部从事大数据算法、数据挖掘、机器学习等工作，此时我开始接触了真正有规模的大数据项目，在每天巨量的数据中利用机器学习、数据挖掘等手段挖掘有意义的信息，成为了中国较早一批做大数据开发的工程师，慢慢的成为了公司顶梁柱，薪资也提升了300%。

百度数据量巨大，每天的流量数据已完全突破PB计算范畴，推荐引擎，相关搜索，自动检索等等都离不开大数据的支撑，在这3年里，我看到国内大数据的兴起，很多用java、php、python、C开发的人都开始往大数据转型。大数据方向俨然成为了业内炙手可热的职位，同时大数据也是未来的发展趋势。

 

百度，淘宝，腾讯每天的数据数以亿计，流量数据已完全突破PB计算范畴，而数据背后的价值更是企业最为看重的，基于存储数据的挖掘与算法成为了企业里最重要的部门，淘宝的交易数据，百度的搜索数据，腾讯的社交数据，已经能够大数据分析出你的年龄，婚姻，收入，职业，爱好，社会阶层，家庭情况等等，或许这些公司比你朋友还更为了解你，你不要惊讶?

 

而这些公司的大数据开发人员工资奇高，有些你都不敢想象，基本上都是以前做普通开发时的3-5倍，年薪20万基本都是入门水平。大数据已经渗透到了多个领域中去，除了互联网行业外，做量化、做通信，甚至做传统医学、法律等行业都开始搞“大数据”了，所以说市场对大数据人才的需求只会越来越大。

 

我发现，在大数据这个领域赚到年薪20万以上，非常容易，大概需要满足以下3个条件：

 

1，计算机科班出身，有编程基础

2，熟练并灵活运用hadoop进行大数据开发和数据挖掘

3，拥有大公司商业实战项目

 

基于这3点，你出去面试任何一家大数据公司，基本可以拿到这个薪水，可能看到这里，有些人愤愤不平，惊叹自己做java 5年了才拿到年薪20万，凭什么？

 

只能说行业不同，薪水自然不同，我认识的有些做会计，教师都快20年了，薪水依然还没过万，而有些刚毕业的小孩，刚培训完hadoop大数据开发，薪水就10000起步。

第一步：计算机科班出身，有编程基础

在做大数据开发之前，基本都学过编程语言，比如C，C++，java等，因为hadoop是高层次的语言开发，需要有编程基础，懂java或者python那就更好了，很快的就能上手。所以普通的转岗人员，或者说非计算机相关专业的大学生是很难进入到这个行业的，这个行业需要编程的底子，尤其是有经验的java或者python开发人员，那更是职业进阶的不二之选，当然，如果你懂其它开发也可以向这个行业发展，因为语言都是相通的，我也见过之前做perl开发的进入了百度公司。

第二步：熟练并灵活运用hadoop进行大数据开发和数据挖掘

Hadoop目前非常火，大数据是趋势，是未来，所以一般这样的公司都是大公司，要求也相对比较高，（所以一般要求最低有本科学历），很多人在这之前都靠自学或者看视频，发现很难入门，尤其是抱着厚厚的一本《hadoop权威指南》更是难啃，出去面试更是很难通过，其实很简单的道理，因为Hadoop门槛高，而市面上熟练Hadoop并愿意分享的人又不多，所以相对成体系的知识就很匮乏了，不像php java发展的已经非常成熟了。所以熟练掌握Hadoop开发的工程师薪水都很可观，这个世界上简单的事情都不会有高薪，我一直认为有门槛的事情才是值得去追逐的事情。

第三步：拥有大公司商业实战项目

这个就更不用说了，简直就是你谈价的砝码，我公司有一个人跳槽去滴滴公司，滴滴直接开出了年薪80万再加期权，看中的是什么？就是他在我们公司积攒的商业项目经验，比如大数据分析你最佳的上车地点，分析最佳路劲所需时间等等，有了经验和方法，就能顺利在滴滴公司直接高效率的工作，节省了很多弯路，对一个公司来讲，最重要的是什么，就是避免跳进坑里，多走弯路，所以拥有大公司商业实战项目是你迈向年薪50万，80万的重要里程碑。

【大数据开发学习资料领取方式】：加入大数据技术学习交流群522189307，点击加入群聊，私信管理员即可免费领取

这样的商业实战案例只有真正参与的才知道其中的重点和难点，书本上是根本学不到的，也没有人会愿意分享出来，第一，时间不够，第二，精力有限，第三，不是三言两语就能说清楚的，都是需要系统化的讲解。

基本上掌握这些大公司商业案例的工程师薪水都可以提升好几倍，让你在面试中立刻脱颖而出，这些都是经验总结，都是花时间和金钱摸索出来的，很少有人愿意对外分享的。

我之前有一个早期的学员，他没有任何开发经验，但是有计算机背景，之前在某机构做助理，就是帮老师调试摄像机，投影仪啥的，耳濡目染，硬是熏陶出来了，他学会了我讲的经验拿到了58同城的offer，18k*15薪，不算其他福利，一年27万，所以项目经验是至关重要的。