centos7：python3.7安装scrapy框架过程

一、ssl错误

pip安装时出现ssl证书问题，无法安装第三方包

而且无法import ssl出现以下错误：

>>> import ssl
Traceback (most recent call last):
  File "<stdin>", line 1, in <module>
  File "/usr/local/lib/python3.7/ssl.py", line 98, in <module>
    import _ssl             # if we can't import it, let the error propagate
ModuleNotFoundError: No module named '_ssl'

可以参照我之前转载的博客解决这个问题：https://blog.csdn.net/qq_38231051/article/details/87600814

 

二、Twisted版本错误

Could not find a version that satisfies the requirement Twisted>=13.1.0 (from scrapy) (from versions: )
No matching distribution found for Twisted>=13.1.0 (from scrapy)

下载Twisted高版本

官方网址： http://twistedmatrix.com/trac/wiki/Downloads

下载后是一个.tar.bz2文件，用tar命令可以解压：

tar xvIf file.tar.bz2

然后安装Twisted：

cd Twisted-18.9.0
python3 setup.py install

三、安装Scrapy

pip3 install Scrapy

安装完毕！