创建 scrapy 爬虫

前言

要使用scrapy框架我们就要对scrapy框架有一个基础的认识

创建scrapy项目文件

在终端输入一下命令

	1. cd scrapy_dom   # 打开scrapy——dome文件也就是我们的scrapy项目的根目录
	2. scrapy  startproject <项目名> # 之后一个参数是项目名
	3. scrapy  genspider 爬虫文件名  ‘域名’# 爬虫文件名不能够和我们项目文件重名，这个语句的作业是生产我们的爬虫文件

scrapy框架的中文文档
以上就是scrapy爬虫项目文件的创建过程了
创建完成后会呈现出一下文件

接下来时生成项目文件的时候产生的文件

spiders文件夹：定义爬虫文件
Items.py文件：定义框架内数据传输的格式
Pipelines.py文件：数据保存模块
Minddlewwares.py文件:中间件模块
Settings.py文件：框架配置模块