准备工作,下载scrapy
pip install scrapy
1. 创建爬虫项目
使用startproject命令创建项目
scrapy startproject s_Test #使用scrapy产生一个scrapy_name爬虫项目
2 生成爬虫项目
使用genspider命令在项目中创建爬虫脚本
scrapy genspider --list
scrapy genspider myspider "www.myspider_domain.com"
准备工作,下载scrapy
pip install scrapy
1. 创建爬虫项目
使用startproject命令创建项目
scrapy startproject s_Test #使用scrapy产生一个scrapy_name爬虫项目
2 生成爬虫项目
使用genspider命令在项目中创建爬虫脚本
scrapy genspider --list
scrapy genspider myspider "www.myspider_domain.com"