scrapy工程建立

1）先声明，我也是学习，只管操作，不管原理

2）进入C:\working\acticlespider  我们今后的所有scrapy工程都在其下面

3）workon scrapy_spider 在C:\working\acticlespider 下进入虚拟环境

4）安装scrapy  pip install -i https://pypi.doubian.com/simple/ scrapy >2.txt  使用豆瓣源安装，不过你应该回报Twisted错误

之所以 >2.txt，是把安装日志输出到2.txt下，我们好看问题

5）www.lfd.uci.edu/~gohlke/pythonlibs/ 在这个网页找我们所犯的错误，下载Twisted，我们安装哪个版本的python，下载哪个版本的Twisted

6)同样，需要进入虚拟环境scrapy_spider  进行Twisted的安装 Pip install Twisted-20.3.0-cp38-cp38-win_amd64.whl

7）再次安装scrapy scrapy  pip install -i https://pypi.doubian.com/simple/ scrapy >2.txt  应该会安装成功

8）在workon scrapy_spider 在C:\working\acticlespider 这个下建立scrapy工程

scrapy startproject scrspider 这样就建立了一个scrapy工程在C:\working\acticlespider下面

9）起始如果不熟悉，可以使用vmware多装几个虚拟机，在它里面开发