记录学习爬虫，进阶大数据，各阶段需掌握技能

#大数据方向（很艰难哦）

1.python基础（语法，函数，模块，面向对象，多线程）
2.python进阶（一切皆对象，魔法函数，垃圾回收，迭代器/生成器，元类编程，socket网络编程，协程，异步IO，并发编程）
3.三大主流数据库（MySQL，mongodb，redis）
4.爬虫基础（requests，JavaScript，CSS，html，xpath，bs4，正则）
5.爬虫进阶（selenium，scrapy，Linux）
6.数据分析（numpy，scipy，pandas，matplotlib）
7.Java
8.大数据入门（Hadoop，Hive，HDFS，MapReduce，Scala ）
9.大数据进阶（Spark，离线处理SparkSQL，实时处理Spark Streaming、Flink以及Storm）
10.其他容器类等：Docker，Kubernetes，kafka

路漫漫其修远兮，吾将上下而求索！