【Scrapy爬虫】scrapy爬虫总结

提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档

---

前言

基于scrapy框架的爬虫

---

一、scrapy初始化

1. 在项目目录执行cmd命令startproject

# 在项目包路径下的cmd界面运行以下代码
scrapy startproject ***
# ***为项目名称

2. 执行命令行的提示语句

具体地说：

2.1 进入上一步的项目目录,即(***)

cd ***

2.2 执行scrapy genspider example example.com

scrapy genspider example example.com
# example表示爬虫名称
# example.com 表示爬取的域名

二、 scrapy命令