本文介绍了如何使用Scrapy构建一个简单的爬虫项目。首先，通过`scrapy startproject`命令创建名为python123demo的工程。接着，生成名为demo的爬虫，设置爬虫名、允许的域名和起始URL。然后，配置爬虫以保存解析后的页面。最后，解决在Windows系统上运行爬虫时遇到的问题，通过安装pypiwin32模块来确保爬虫成功运行，并捕获页面内容存储在demo.html中。
演示地址：http://python123.io/ws/demo.html
文件名称：demo.html
产生爬虫框架：
1、建立一个scrapy爬虫工程
2、在工程中产生一个scrapy爬虫
3、配置spider爬虫
4、运行爬虫，获取网页
具体操作：
1、建立工程
定义一个工程，名称为：python123demo
方法：
在cmd中，d: 进入d盘， cd pycodes 进入文件pycodes
然后输入
scrapy startproject python123demo
在pycodes中会生成一个文件：
_init_.py不需要用户编写
2、在工程中产生一个scrapy爬虫
执行一条命令ÿ
最低0.47元/天 解锁文章
3700
被折叠的 条评论
为什么被折叠?
到【灌水乐园】发言
