那些年踩过的坑

最新推荐文章于 2024-07-12 23:25:26 发布

镹丶天

最新推荐文章于 2024-07-12 23:25:26 发布

阅读量580

点赞数 1

分类专栏：爬虫

本文链接：https://blog.csdn.net/u010085423/article/details/55211029

版权

爬虫专栏收录该内容

7 篇文章 0 订阅

订阅专栏

yum install libxml2-devel
sudo ln -s /usr/include/libxml2/libxml /usr/include/libxml

yum install libxslt-devel -y

1 . ImportError: No module named w3lib.http

　　　　解决：pip install w3lib

2 . ImportError: No module named twisted

　　　　解决：pip install twisted

3 . ImportError: No module named lxml.html
　　　　解决：pip install lxml

4 . error: libxml/xmlversion.h: No such file or directory
　　　　解决：yum install libxml2-dev libxslt-dev
　　　　　　　yum install python-lxml

5 . ImportError: No module named cssselect
　　　　解决：pip install cssselect

6 . ImportError: No module named OpenSSL
　　　　解决：pip install pyOpenSSL

7 . ImportError: No module named builtins
解决： pip install future

8 . ImportError: No module named thrift
先执行

yum -y install automake libtool flex bison pkgconfig gcc-c++ boost-devel libevent-devel zlib-devel Python-devel ruby-devel crypto-utils aopenssl openssl-devel

        然后执行 ：
            cd /data
            wget http://apache.fayea.com/thrift/0.10.0/thrift-0.10.0.tar.gz
            tar -xzvf thrift-0.10.0.tar.gz
            cd  thrift-0.10.0
            ./configure
            make  
            make install

9 . ImportError: No module named hbase
解决：
1. 复制Hadoop 目录下的：

/home/hadoop/hbase/hbase-thrift/src/main/resources/org/apache/hadoop/hbase/thrift/gen-py

2.到云主机目录/usr/lib/python2.7/site-packages/下
3 . phantomjs的文件要放到/data下
4 . pip install selenium
5 . yum install fontconfig

error: command ‘gcc’ failed with exit status 1

用安装python模块出现error: command 'gcc' failed with exit status 1 ，明明装了gcc的，怎么会不行呢，然后发觉是failed不是not found，这说明这个错误个gcc没多大关系，应该是缺少某些功能模块，然后谷歌了一下，先后安装了python-devel,libffi-devel后还是不行，最后发觉要安装openssl-devel才行
可如下命令行安装：
yum install gcc libffi-devel python-devel openssl-devel