写在前面的话
这个可能对大多数人没有用,因为Python 2.7 在2021年就不维护了,如果直接是Python 3.0 的话就不会有这么多问题了。不过我之前大部分代码都是2.7写的所以现在也要把这个问题解决了。
不正经的正文
一般情况下,如果你是Python 3.0 的话,其实安装scrapy 用pip install scrapy 也可以。但是如果缺少一些依赖库的话可能也会报错。所以我在这里推荐conda, 他已经封装好了很多的依赖库。直接使用conda 的话针对python 3.0 和2.0 都同样适用,并且简单不容易出错。
我先来说说我用pip install scrapy 出现的坑:
第一个提示就是python 2.7 reached the end of its life on January 1st 2020. 就是用pip 安装Python 2.0 的后续服务都不在更新了。
当然我按照要求升级了各种东西包括什么pip 之后还是要我安装一堆依赖库,什么six, lxml 等等。
但是还是持续有坑。
所以我建议大家直接安装官网上的要求来。
首先就是先安装我们conda
我是Linux系统,具体的安装的方法建议参考[Anaconda的官网]: