首先scrapy的安装之前需要安装这个模块:wheel、lxml、Twisted、pywin32,最后在安装scrapy
1. lxml这个库是用来做xpath提取的,这个库非常容易安装,直接在cmd窗口输入:pip intsall lxml
2. 因为我们后面将不采用pip来安装而是直接安装.whl文件,所以这里应该安装一个wheel模块,这边你可以直接在cmd中输入pip install wheel
3. 如果你是刚安装python,按可能在安装的时候会报错,原因是pip的版本太低,故你需要在此步骤之前,更新一下pip,直接在cmd中输入:python -m pip install --upgrade pip,
4.Twisted模块直接安装,肯定是会报错的,这边采用的是安装.whl文件
https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
安装时会一起安装 automat,pyhamcrest,attrs,constantly,hyperlink,idna,incremental,six,zope.interface
2.5 在命令行中执行以下命令安装
python -m pip install pypiwin32
安装会安装 pypiwin32-223 ,pywin32
再独立安装下 pywin32-ctypes 我也不知道为啥,反正人家有
6. scrapy同样在这个网站下载
https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
会安装 pydispatcher,scrapy,asn1crypto,cffi,cryptography,cssselect,parsel,pyOpenSSL
pyasn1,pyasn1-modules,pycparser,queuelib,service-identity,w3lib
打开cmd,输入scrapy,查看信息,有信息就肯定成功了