Ubuntu 18.04安装Scrapy步骤及各种报错总结

最新推荐文章于 2022-08-08 17:20:58 发布

the best messi

最新推荐文章于 2022-08-08 17:20:58 发布

阅读量1k

点赞数 1

分类专栏： Python爬虫文章标签： python ubuntu 爬虫 linux

本文链接：https://blog.csdn.net/qq_43779324/article/details/107864893

版权

本文记录了在Ubuntu 18.04上安装Scrapy过程中遇到的常见问题及其解决方案，包括ReadTimeoutError和setuptools版本问题。通过更换下载源、更新setuptools以及多次尝试pip安装，最终成功解决安装问题。

摘要由CSDN通过智能技术生成

前言

难道就我一个人总是安装一个库要整一天的嘛？还是学习崔老师的《python网络爬虫开发实战》这本书，今天安装的是目前非常流行的爬虫框架：Scrapy。还是一如既往的按照老师的安排运行各种命令，前面都还好，一到后面的关键部分install包的时候就出现了各种问题，下面我来列举一下：帮大家避一下坑。

1.首先是安装一些依赖库，直接复制粘贴到终端运行即可，这个一般是不会出问题的。

sudo apt-get install build-essential python3-dev libssl-dev libffi-dev libxml2 libxml2-dev libxslt1-dev zlib1g-dev

2.然后就是利用pip命令安装Scrapy了，命令如下：

pip3 install Scrapy

关注

专栏目录