运行环境windows10,开发软件:pycharm2018.2.2
1.创建项目
在django项目中,创建scrapy方法:
terminal->scrapy startproject 爬虫名
2.创建爬虫
scrapy genspider zhihu zhihu.com
如果在同一项目下创建多个爬虫,需要termi->cd wister->scrapy genspider 爬虫名 域名
项目结构:
3.运行爬虫
如果需要运行其中一个爬虫,需要termianl->cd wister->cd wister->scrapy crawl 爬虫名