大数据必会指南

转载 2017年10月06日 21:17:27

总结如下:

必须技能10条:

01.Java高级(虚拟机、并发)
02.Linux 基本操作
03.Hadoop(此处为侠义概念单指HDFS+MapReduce+Yarn )
04.HBase(JavaAPI操作+Phoenix )
05.Hive(Hql基本操作和原理理解)
06.Kafka
07.Storm
08.Scala需要
09.Python
10.Spark (Core+sparksql+Spark streaming )
11.一些小工具(Sqoop等)

高阶技能6条:
11.机器学习算法以及mahout库加MLlib
12.R语言
13.Lambda 架构
14.Kappa架构
15.Kylin
16.Aluxio

三.学习路径

由于本人是从Java开发通过大概3个月的自学转到大数据开发的。所以我主要分享一下自己的学习路劲。

第一阶段:
01.Linux学习(跟鸟哥学就ok了)
02.Java 高级学习(《深入理解Java虚拟机》、《Java高并发实战》)

第二阶段:
03.Hadoop (董西成的书)
04.HBase(《HBase权威指南》)
05.Hive(《Hive开发指南》)
06.Scala(《快学Scala》)
07.Spark (《Spark 快速大数据分析》)
08.Python (跟着廖雪峰的博客学习就ok了)

第三阶段:
对应技能需求,到网上多搜集一些资料就ok了,我把最重要的事情(要学什么告诉你了),
剩下的就是你去搜集对应的资料学习就ok了

当然如果你觉得自己看书效率太慢,你可以网上搜集一些课程,跟着课程走也OK 。这个完全根据自己情况决定。如果看书效率不高就很网课,相反的话就自己看书。

四.学习资源推荐:

01.Apache 官网
02.Stackoverflow
04.github
03.Cloudra官网
04.Databrick官网
05.过往的记忆
06.CSDN,51CTO
07.至于书籍当当一搜会有很多,其实内容都差不多。

最后但却很重要一点:要多关注技术动向,持续学习。

《渗透测试实践指南 必知必会的工具与方法 (原书第2版)》读书摘录

----------------------------------------------------------------------------分割线---------------------...
  • B_Spring
  • B_Spring
  • 2015年05月28日 17:15
  • 2043

独家 | 大数据人工智能领域从菜鸟到高手晋级指南

作者:王明哲、王存光 校对:丁楠雅 本文长度为5600字,建议阅读10分钟 本文为你剖析当下的时代背景,为在大数据江湖中修炼的行者提供升级建议。 我们身处一个“技术爆炸”和“共享、开源...
  • eNohtZvQiJxo00aTz3y8
  • eNohtZvQiJxo00aTz3y8
  • 2017年11月12日 00:00
  • 550

大数据项目实践指南(总体思路)

做了三个完整的大数据项目后,我整理了一下大数据的项目实践思路,这里写下总体思路。如果加油的人多,我愿意将其详细编写为一本书,就叫《大数据项目实践指南》吧?哪个出版社有兴趣的话,可以联系我。徐建明 18...
  • jaminwm
  • jaminwm
  • 2016年03月29日 12:41
  • 3733

《SQL必知必会》(1-7)

《SQL必知必会》读书笔记 说明:本书SQL语句均使用PLSQL Developer客户端,在oracle数据库中实践。 1. 基本概念 表(table):某种特定类型数据的结构化清单。 模式...
  • Regina_niu
  • Regina_niu
  • 2016年12月21日 09:33
  • 532

原创翻译 | 2017年大数据新手入门指南

大数据的概念提出已经有一段时间了,但实际上它仍然有点模糊不清。作为人工智能、数据分析和物联网等数字化转型浪潮中的驱动力,它的概念有待在发展中重新审视。 基于以上考虑,我觉得该写一份针对初学者的指...
  • openfea
  • openfea
  • 2017年03月17日 13:14
  • 395

三种最典型的大数据存储技术路线

大数据这个领域过去5年发展很快、热度很高,但是总的来说目前还在起步阶段。本次研讨会我会先谈谈数据,以及大数据对数据处理技术的压力,然后为大家分享一下为什么这几年数据处理技术上的创新很多。  ...
  • sunjinshuang
  • sunjinshuang
  • 2015年03月18日 14:47
  • 1156

首个《中国大数据人才培养体系标准》正式发布!

2017年11月18日,由中国商业联合会数据分析专业委员会(以下简称“数据委”)联合全国87位专家共同起草的《中国大数据人才培养体系标准》(以下简称“标准”)在第五届中国数据分析行业峰会现场正式发布。...
  • cpless
  • cpless
  • 2017年11月21日 09:24
  • 272

SQL必知必会 第4版pdf

下载地址:网盘下载 内容简介  · · · · · · SQL语法简洁,使用方式灵活,功能强大,已经成为当今程序员不可或缺的技能。 本书是深受世界...
  • cf406061841
  • cf406061841
  • 2017年06月03日 23:18
  • 5074

《sql必知必会》笔记

第一课:了解SQL
  • rainy_allen
  • rainy_allen
  • 2014年04月16日 21:13
  • 873

sql必知必会(第四版) 学习笔记一

温习一遍简单的sql语法,把自己掌握还不够的地方,做了些笔记.... 1 去重复关键词,distinct     select distinct sname from student;   2...
  • Dreamworker007
  • Dreamworker007
  • 2013年10月26日 23:02
  • 8165
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:大数据必会指南
举报原因:
原因补充:

(最多只允许输入30个字)