【Python爬虫】Scrapy模块案例:爬取腾讯招聘网基本信息
Scrapy模块是一个很好用的模块,功能强大。最近在学习使用scrapy模块,写了一点小东西,爬取腾讯招聘网的基本信息。
scrapy项目步骤:
1. 创建项目:scrapy startproject xxx
2. 编写items.py文件,用于设置需要保存的字段内容
3. 编写爬虫文件
4. 运行爬虫 scrapy crawl xxx
第一步:创建项目,创建完成,目录如下
第二...
原创
2018-08-29 11:15:21 ·
796 阅读 ·
1 评论