Windows环境安装scrapy

由于目前需要做一个爬虫，有用到scrapy，所以需要安装，目前官网给的安装要求是

Twisted 14.0

lxml 3.4

pyOpenSSL 0.14

 

在网上搜了各种说明，最终安装过程如下：

PS：可以在https://pypi.python.org/simple/找需要的安装包。同时注意，通过python命令行测试是否安装成功，需要安装完成后重新开启命令行现验证。

1、  安装Twisted

（1）安装twisted

https://pypi.python.org/simple/twisted下载的版本是Twisted-15.4.0.win-amd64-py2.7.exe。

安装完成后，你会在C:\Python27\Lib\site-packages目录下看到twisted文件夹

python命令行运行import twisted测试是否成功，报错缺少zope.interface，要求3.6.0以上版本。

（2）安装zope.interface

https://pypi.python.org/simple/zope.interface/，下载最新版本是zope.interface-4.3.3.win-amd64-py2.7.exe。

安装完成后，你会在C:\Python27\Lib\site-packages目录下看到zope文件夹。

python命令行运行import twisted验证，不报错，安装成功。

2、  安装lxml

https://pypi.python.org/simple/lxml/，下载版本是lxml-3.7.3.win-amd64-py2.7.exe。

python命令行运行import lxml验证，不报错，安装成功。

3、  安装pyOpenSSL

（1）下载安装包

https://pypi.python.org/simple/pyopenssl/，由于要求0.14以上版本，只能下载whl格式的，pyOpenSSL-16.2.0-py2.py3-none-any.whl。

（2）安装wheel

在windows cmd命令窗口：pip install wheel。安装成功可以在 C:\Python27\Lib\site-packages下看到wheel的文件夹。

（3）安装

Cmd命令行运行pip install D:\python\pyOpenSSL-16.2.0-py2.py3-none-any.whl

python命令行运行import OpenSSL验证，不报错，安装成功。

 

4、安装scrapy

https://pypi.python.org/simple/scrapy/，下载Scrapy-1.3.2-py2.py3-none-any.whl。

cmd命令行运行pip install D:\python\Scrapy-1.3.2-py2.py3-none-any.whl。

python命令行运行import scrapy验证，不报错，安装成功。