Python3.6安装Scrapy爬虫框架

Python3.6安装Scrapy爬虫框架

• Windows10 64位系统安装Scrapy版本
• 安装lxml
• 安装zope.interface
• *安装pyOpenSSL
• 安装Twisted
• 安装pywin32
• 安装Scrapy

---

安装lxml

Python3.6版本，windows 10系统下，在（http://www.lfd.uci.edu/~gohlke/pythonlibs/）找到lxml‑3.8.0‑cp36‑cp36m‑win_amd64.whl，采用pip方式安装。

pip install lxml‑3.8.0‑cp36‑cp36m‑win_amd64.whl

安装zope.interface

在（https://pypi.python.org/pypi/zope.interface#downloads）下载zope.interface对应版本的wheel文件，然后pip安装，下载zope.interface-4.4.2-cp36-cp36m-win_amd64.whl

pip install zope.interface-4.4.2-cp36-cp36m-win_amd64.whl

安装pyOpenSSL

官方网站下载wheel文件，https://pypi.python.org/pypi/pyOpenSSL#downloads，如当前最新版本名称是pyOpenSSL-16.2.0-py2.py3-none-any.whl，下载后安装即可。

pip install pyOpenSSL-16.2.0-py2.py3-none-any.whl

安装Twisted

同理，http://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted下载wheel文件，利用pip安装即可。
如Python 3.6版本，Windows 64位系统，下载
Twisted‑17.5.0‑cp36‑cp36m‑win_amd64.whl，然后pip安装。

pip install Twisted‑17.5.0‑cp36‑cp36m‑win_amd64.whl

安装pywin32

从官方网站 https://sourceforge.net/projects/pywin32/files/pywin32/Build%20220/ 下载对应版本的安装包安装即可。
但是容易出现问题，就是在安装时会出现提示python3.6-32在注册表中不存在。首先根据(http://blog.csdn.net/u014680513/article/details/51005650)把Python写入注册表，在HKEY-CURRENT_USER–Software–Python–PythonCore–会发现3.6文件夹，把这个文件夹导出并重命名为3.6-32，然后导入注册表。就可以安装Pywin32了。

安装Scrapy

也是采用wheel形式安装Scrapy-1.4.0-py2.py3-none-any.whl

pip install Scrapy-1.4.0-py2.py3-none-any.whl