立即学习:https://edu.csdn.net/course/play/24756/280645?utm_source=blogtoedu
##什么是爬虫笔记
##什么是爬虫:
爬虫是一个模拟人类请求网站行为的程序。可以自动请求网页、并把数据抓取下来,然后使用一定的规则提取有价值的数据。
##爬虫应用场景:
1.搜索引擎
2.伯乐在线
3.数据分析
4.抢票软件等
##为什么用Python写爬虫
python:语法优美、代码简洁、开发效率高、支持的模块多。相关的HTTP请求模块和HTML解析模块非常丰富。还有Scrapy和Scrapy-redis框架让我们开发爬虫变得异常简单