ubuntu16.04下安装scrapy框架

原创 2016年08月29日 16:26:51

一.按照官方文档的说明,安装scrapy 需要以下程序或者库:

(1)、Python 2.7

(2)、lxml。 Most linux distributions ships PRepackaged versions of lxml. Otherwise refer tohttp://lxml.de/installation.html

(3)、OpenSSL。 This comes preinstalled in all Operating systems except Windows (see Platform specific installation notes)

(4)、pip or easy_install Python package managers

二.安装lxml
pip install lxml即可

三.安装OpenSSL
sudo apt-get install python-openssl #安装openssl
sudo apt-get install libssl-dev #安装所需依赖

四.更新必要依赖
sudo apt-get install python-dev
sudo apt-get install libevent-dev

五.更新pip包管理工具
apt-get install python-pip

六.安装scrapy
pip install Scrapy

七.查看安装scrapy版本
scrapy version

  • Ps.

    • 安装过程中曾发生过 command ‘x86_64-linux-gnu-gcc’ failed with exit status 1这种报错,初步判断是说gcc的版本对不上,其实!我也不知道是怎么回事……
    • 但是在网上查询到几种解决方法:

      • sudo apt-get install libffi-dev
        sudo apt-get install libssl-dev
        sudo apt-get install python-dev

      • sudo apt-get install libxslt1-dev libxslt1.1 libxml2-dev libxml2 libssl-dev

      • 然后就通过升级setuptools的方式,也就是直接的sudo apt-get update就行了…
版权声明:本文为博主原创文章,未经博主允许不得转载。

相关文章推荐

大数据爬虫基础(三)Scrapy在ubuntu 16.04下的安装

Scrapy ubuntu下安装 系统:ubuntu 16.04 no gui 依赖包及依赖包的依赖包: 下列的安装步骤假定您已经安装好下列程序: http://scrapy.org/ Pytho...
  • dst1213
  • dst1213
  • 2016年04月24日 09:07
  • 2476

Linux-Ubuntu16.04下Python3.5安装pip3以及scrapy、numpy、itchat

Python3.x库安装

在ubuntu16.04下安装mysql的简便方法

  • 2017年05月26日 10:55
  • 301KB
  • 下载

ubuntu16.04下安装opencv3.1+anaconda2+caffe

仅供参考

ubuntu16.04下安装matlab2016b教程

主题:Linux下安装MATLAB2016 首先本文在Eric2016_Lv文章基础上进行安装,自己也根据实际情况遇到了一些问题并加以解决,步骤如下: 步骤: 1、下载:下载地址见参考文章 下载后的...

Ubuntu16.04下Anaconda,spark,Hadoop的安装

ubuntu下安装jdk、scala、spark,hadoop

在Ubuntu 16.04下安装Matlab 2017a

本次安装过程很大程度上参考了http://blog.csdn.net/dr_destiny/article/details/53336324 (Ubuntu 16.04 LTS下安装MATLAB R2...

Ubuntu 16.04下CPU only模式的caffe安装

本文的内容主要参考了Ubuntu16.04安装Caffe(CPU Only)的工作,该篇博文比较符合我的需要,网上很多的caffe安装的教程都是带了GPU的,对我现在而言,不需要,该篇博文较好的满足我...

ubuntu16.04下安装opencv2.4.13

安装opencv2.4.13 安装依赖包 安装编译工具 sudo apt-get install build-essential 安装依赖包 sudo apt-get install cmake gi...

Ubuntu 16.04下安装最新jdk 1.8

Ubuntu 16.04下安装jdk 1.8 1 下载JDK     去JAVA官网上把自己对应自己版本jdk下好        前两个是适合ARM架构的CPU,第三个和第四个是32位的,而第五...
  • C_C_M_M
  • C_C_M_M
  • 2017年05月26日 18:13
  • 149
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:ubuntu16.04下安装scrapy框架
举报原因:
原因补充:

(最多只允许输入30个字)