![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
爬虫
mzf19980423
这个作者很懒,什么都没留下…
展开
-
scrapy爬虫框架基本使用
1、创建scrapy项目 一般使用 scrapy startproject firstblood(项目名称) 创建。创建完以后的结果如图: 2、爬虫文件的创建 创建完项目,我们可以看到一个spiders的文件夹,爬虫文件都是创建在这个文件夹下,创建爬虫文件一般也使用命令scrapy genspider first www.xxx.com,创建完成以后的基本页面如图,我们一般将allowed_domains = ['www.xxx.com']这行代码注释掉,原因是因为,我们可能爬取的文件并不是以www.xx原创 2020-12-18 20:07:38 · 128 阅读 · 2 评论 -
Scrapy 安装步骤
Scrapy 安装步骤原创 2020-12-18 18:06:55 · 74 阅读 · 1 评论