虚拟环境安装Scrapy框架

Scrapy框架涉及到依赖库,采用本地安装
建议在虚拟环境中安装
python -m venv Scrapy
cd Scrapy
cd Scripts
activate
python3.3以上可以通过上面的步骤进入虚拟环境

升级pip
python -m pip install --upgrade pip

下载lxml文件
https://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml
pip install wheel
安装下载的文件
pip install lxml-4.2.1-cp36-cp36m-win_amd64.whl

安装zope.interface
下载对应的版本
https://pypi.org/project/zope.interface/#downloads
pip install zope.interface-4.5.0-cp36-cp36m-win_amd64.whl

安装pyOpenSSL
https://pypi.org/project/pyOpenSSL/#downloads
pip install pyOpenSSL-17.5.0-py2.py3-none-any.whl

安装Twisted
https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
pip install Twisted-18.4.0-cp36-cp36m-win_amd64.whl

安装pywin32
https://sourceforge.net/projects/pywin32/files/pywin32/ #旧版本网址
https://github.com/mhammond/pywin32/releases #新版本网址
双击安装
pywin32-223.win-amd64-py3.6.exe

 

安装Scrapy

pip install Scrapy

 

 

补充

在使用过程中提示

ModuleNotFoundError: No module named 'win32api'

执行

python -m pip install pypiwin32