1.确定学习思想
学习编程,学的不是代码,代码可以给你,但是给你了,你看得懂吗? 我们学的是一个编程思路
如我们要爬12306,我们要有一个思路
制定爬取内容
选取目标
准备环境,上面就提前说了,因为这个本来就是在搞爬虫,所以…
分析该网站的html结构,得到url
爬取数据
分析数据
封装数据(组装数据)
2.重点学习 :
1.并发编程
2.破解反扒技术
3.APP的抓取
4.分布式爬虫
Python的就业方向里面有很多值得选择,如:web、爬虫、运维、黑客、人工智能等。
简析:
Python web:主要用于后端
爬虫:数据挖掘
运维:主要是涨工资和满足公司要求
黑客、人工智能:不推荐,一旦决定了,就要一直走下去,没有回头路