一、在pycharm中创建一个scrapy项目
首先要打开terminal终端
创建一个项目的语句为
scrapy startproject 项目名称
例如:
创建一个名称为scrapy_Pro的项目
在terminal终端输入
scrapy startproject scrapy_Pro
项目成功创建则会显示如下指示
在terminal终端继续输入命令按照提示进入项目:
cd 项目名
例:
cd scrapy_Pro
在终端继续输入指令创建爬虫文件
scrapy genspider 爬虫文件名 爬取的地址
例:
scrapy genspider spider_file www.xxx.com
上图中example为爬虫文件名称(可自定义),example.com为项目访问的地址,可以先随便填写一个,之后直接进入爬虫文件修改
下面是生成的爬虫项目的结构
下面是example.py文件的初始内容