大数据开发总结开篇

大数据开发总结开篇

喊着系统学习总结Python及大数据开发已经很久了，一直是晃晃悠悠的，结果从lua探针项目开始到现在已经快要结束了，不仅lua总结没有完成，而且马上要开始Python大数据的项目了，Python及大数据相关的知识也还没有系统性的总结，自己的执行力还真是差强人意，也因此感觉每天坚持1.1而不是0.9还真不是一件简单的事情，所以，马上行动起来，学习会比游戏更让人充实。

由于是后面大数据项目要用，所以初步的规划是学习完Python的基础知识，然后系统过一下大数据方面的知识，之前有学过一些基础的Python语法以及java大数据方面的一些内容，所以主要还是系统性的过一遍，然后写写代码，熟下手，写完c感觉c++有些手生，写完lua感觉c有些手生，写代码的手感我感觉还是蛮重要的，手感好了，思路的输出也会更流畅。

分成以下几个学习重点：

• Python3基础知识
• Java基础知识
• 大数据概述及背景
• 搭建Hadoop环境
• HDFS
• MapReduce
• Zookeeper
• Hive
• Flume
• Sqoop
• Azkaban
• Hbase
• Elasticsearch
• scala
• Spark
• Memchched
• Kafka
• Flink

呼，算是定下一个新的目标，不然自己又会懒散着去打游戏荒废人生了，尽量在lua项目结束前完成lua的总结，然后同步希望Python基础知识能总结完，能上手写一写Python代码，然后在维护lua项目的时候能帮手写一些Python的脚本，一边帮手熟悉大数据的项目一边总结大数据相关的知识，反正闲着也是闲着，大数据技能树也能点起来了，就是我这嵌入式Linux开发工程师的技能点的越来越离谱了（还在想着人工智能_.，没事，有饭吃、有事做，想那么多干嘛那）。