旧版本scrapy升级新版本遇到的一些问题

原创 2015年11月18日 13:31:00

最近有新同学学抓数据,他们看的是中文文档,大概是0.25版本的,所以按照教程安装的时候,装的也是老版本的scrapy,不能用一些FilePipleline的东西,非常不方便.

他们装的时候是用apt-get安装的,升级的时候可以用apt-get remove,然后再按照英文文档里的方法安装就好了.

但是另一个同学不知道怎么安装的,scrapy直接就报错.报错信息ibutionNotFound: The 'cryptography>=0.7' distribution was not found and is required by pyOpenSSL, py一般就是这类软件不够新,所以呢,然后还有什么distutils.errors.DistutilsError: Setup script exited with error: command 'x86_64-linux-gnu-gcc' failed with exit status 1这种错误,其实我也不知道怎么回事.搜到了几个方法:

https://github.com/pyca/pyopenssl/issues/117

sudo apt-get install libffi-dev
sudo apt-get install libssl-dev
sudo apt-get install python-dev

http://stackoverflow.com/questions/22727782/repeatedly-failing-to-install-scrapy-and-lxml

sudo apt-get install libxslt1-dev libxslt1.1 libxml2-dev libxml2 libssl-dev
这样之后,然后升级一下setuptools,再安装新版本的scrapy就好了...

Scrapy升级到1.0版本

发现scrapy已经升级到1.0.1了,之前一直使用的是0.24.1 使用下面命令升级:>python -m pip install --upgrade scrapy变化待续……...
  • felcon
  • felcon
  • 2015年07月08日 11:24
  • 1404

Python Scrapy安装(python 版本手动更新)

Scrapy安装需要python2.7以上 若python版本为2.6,则需要更新 #下载python2.7 #wget http://python.org/ftp/python/2....

ubuntu linux 安装 scrapy 及遇到的问题

1. scrapy英文文档网址如下 http://doc.scrapy.org/en/latest/intro/install.html2. 安装流程 pip 安装pythonsudo apt-get...

升级scrapy-redis代码,使与更新版本scrapy兼容

scrapy-redis的安装要求是scrapy版本高于0.14,是

大数据爬虫基础(三)Scrapy在ubuntu 16.04下的安装

Scrapy ubuntu下安装 系统:ubuntu 16.04 no gui 依赖包及依赖包的依赖包: 下列的安装步骤假定您已经安装好下列程序: http://scrapy.org/ Pytho...
  • dst1213
  • dst1213
  • 2016年04月24日 09:07
  • 2605

教你如何cocoapods卸载安装新版本和旧版本

我在装cocoapods会遇到各种的问题,我来教大家卸载安装最新的V1.0.1。 现在打开终端,开始我们的卸载之旅。 一.首先卸载pod which pod 得到pod的路径 sudo ...
  • wm9028
  • wm9028
  • 2016年07月08日 18:29
  • 3307

关于vs老版本转换新版本的一些问题

关于vs老版本转换新版本的一些问题                                一般vs低版本项目转换为高版本项目时打开会有自动转换导航一般不予讨论;但有的会有以下问题:(无法读...

Android ADT升级到17.0版本后的一些问题

以前我们在开发android程序的时候,很多情况下会导入第三方库,以前我们只要在项目的根目录下建个lib或者libs目录就可以了然后: 下面以gifview这个项目为例: 1.未添加第三方...
  • zxxjj
  • zxxjj
  • 2012年04月19日 16:02
  • 995

VUE开发请求本地数据的配置,旧版本dev-server.js,新版本webpack.dev.conf.js

VUE开发请求本地数据的配置,早期的vue-lic下面有dev-server.js和dev-client.js两文件,请求本地数据在dev-server.js里配置,最新的vue-webpack-te...
  • jyxmust
  • jyxmust
  • 2017年12月10日 22:29
  • 16

Red Hat Linux卸载旧版本的JDK安装新版本的JDK并附yum安装

Red Hat Linux卸载旧版本的JDK安装新版本的JDK并附yum安装 JDKLinuxPythonCentOSJava  某机器安装了非常旧版本的红帽: [root@lo...
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:旧版本scrapy升级新版本遇到的一些问题
举报原因:
原因补充:

(最多只允许输入30个字)