一.安装scrapy
(1)先安装依赖
http://download.csdn.net/download/qq_35064031/10034728
下述文件以及后面需要用到的工具安装皆在上面的链接中
lxml-3.7.3-cp36-cp36m-win_amd64.whl
zope.interface-4.3.3-cp36-cp36m-win_amd64.whl
pywin32-221-cp36-cp36m-win_amd64.whl
Twisted-17.1.0-cp36-cp36m-win_amd64.whl
通过pip install 安装这些文件,注意在文件名前必须加上绝对路径
pip intsall lxml-3.7.3-cp36-cp36m-win_amd64.whl
pip install zope.interface-4.3.3-cp36-cp36m-win_amd64.whl
pip install pywin32-221-cp36-cp36m-win_amd64.whl
pip install Twisted-17.1.0-cp36-cp36m-win_amd64.whl
通过pip安装OpenSSL: pip install pyOpenSSL
(2)进入python编译环境输入下列命令测试上述文件是否安装成功
>>>import lxml
>>>import zope.interface
>>>import Twisted
>>>import OpenSSL
注意:如果没有错误则依赖安装成功
(3)安装scrapy
pip install scrapy=1.1.0rc3
(4)一般初次安装会报缺少Microsoft Visual C++ Build Tools错误
这个在我上面发的链接文件夹中就有个文件 双击安装即可
(5)检查scrapy是否安装成功
在cmd中输入以下命令
scrapy version # 查看scrapy版本 如果不报错即安装成功
(6)创建第一个scrapy项目
使用命令
scrapy startproject tutorial # 你可以使用cd先选择想要项目想要存放的位置