Scrapy 在Mac OSX 10.10 上安装错误的解决。Failed building wheel for lxml

最新推荐文章于 2024-07-30 16:51:11 发布
最新推荐文章于 2024-07-30 16:51:11 发布
阅读量6.6k 收藏
点赞数
分类专栏： 数据结构与算法 文章标签： osx Scrapy Python 爬虫
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ColdZoo/article/details/46051393
版权
在Mac OSX 10.10上使用pip安装Scrapy时，会遇到lxml模块编译错误。为解决此问题，可以不通过pip直接安装lxml的二进制版本，首先安装Macport，然后通过Macport安装py27-lxml，最后再用pip安装Scrapy。成功安装后，通过scrapy bench测试确认Scrapy运行正常。
摘要由CSDN通过智能技术生成

Scrapy 在Mac OSX 10.10 上安装错误的解决

Scrapy 是一个基于Python的爬虫框架。它简洁而跨平台，适合爬虫类软件的快速开发。

Scrapy的官方安装文档中给出的安装方法是使用pip进行安装

pip install Scrapy

但是在OSX 10.10中运行以上代码会出现lxml模块无法编译的问题。错误信息为

 Failed building wheel for lxml

更详细的错误信息类似于

'CC' can't be find

这个错误是因为pip在安装Scrapy模块时依赖lxml模块，而pip的默认行为是下载源码进行编译。在MAC终端中又没有指定C编译器的环境变量。

如果没有在MAC上编译C代码的需求，我们可以直接安装lxml的二进制版本，步骤如下：

  • 下载并安装Macport

从Macport官网下载Yosemite版本的Macport并安装

  • 安装二进制版本lxml, 在终端中运行如下命令

sudo port install py27-lxml

  • 安装Scrapy
最低0.47元/天 解锁文章
ColdZoo
关注
专栏目录
python3安装不了lxml_python3.4安装中出现lxml错误
weixin_42356315的博客
02-03 974
我试图在命令提示符下运行以下命令-pip install -r requirements.txt但是它显示了很多错误，我不知道如何解决它们，因为我不熟悉python。在错误包括：1在^{pr2}$3。在Failed building wheel for lxmlRunning setup.py clean for lxmlFailed to build lxmlInstalling collect...
Failed to build lxml ERROR: Could not build wheels for lxml, which is required to install pyproject.
代码讲故事
12-14 1857
Failed to build lxml ERROR: Could not build wheels for lxml, which is required to install pyproject.toml-based projects.
Python安装dlib依赖包报错：ERROR: Failed building wheel for dlib Failed to build dlib
最新发布
07-30 824
Python安装dlib依赖包报错：ERROR: Failed building wheel for dlib Failed to build dlib
【Python】pip 安装lxml编译失败处理
qq_20623849的博客
12-25 947
【代码】pip 安装lxml编译失败处理。
Python安装scrapy常见的坑Unable to find vcvarsall.bat 或Failed building wheel for lxml
JACKhao的专栏
04-19 1235
1  pip install wheel twised的下载页面：http://twistedmatrix.com/trac/wiki/Downloads 2  C:\Python34\Scripts>pip install D:\Download\Twisted-17.1.0-cp34-cp34m-win_amd64. whl (python3.4  64位平台  注意cp34
已解决Building wheel for lxml (setup.py) … error
努力让自己发光，对的人才能迎着光而来
01-18 1万+
已解决（pip安装第三方模块lxml模块报错）Building wheels for collected packages: lxml Building wheel for lxml (setup.py) … error error: subprocess-exited-with-error python setup.py bdist_wheel did not run successfully. note: This error originates from a subprocess，and is li
安装cryptography报错：Failed building wheel for cryptography
lavender_dream的博客
11-02 2万+
文章目录前言Failed building wheel for cryptography 解决方案（1）根据提示：我在终端输入：（2）我选择通过如下命令升级pip：（3）再下载cryptography（4）最后尝试最初的下载早中晚温差较大，注意保暖哦，sincerely，end. 前言   “pip install scrapy faker selenium”时，出现报错“Failed building wheel for cryptography”，已解决，如有错误，请纠正，万分感谢！ Failed
安装Scrapy时报错Failed building wheel for Twisted
Keyes的博客
07-07 1万+
在pip安装Scrapy的时候，报错Failed building wheel for Twisted。和error: Microsoft Visual C++ 14.0 is required。 需要我们自己下载Twisted，然后安装。这里有Python的各种依赖包。选择适合自己Python以及系统的Twisted版本。 http://www.lfd.uci.edu/~gohlke/pyth
解决Scrapy安装错误:Microsoft Visual C++ 14.0 is required...
09-21
错误提示表明在安装Scrapy及其依赖库（如Twisted）的过程中，缺少必要的编译工具。 #### 解决方案 解决这个问题的一种有效方法是手动安装缺失的依赖项，而不是仅仅安装Scrapy本身。具体步骤如下： 1. **下载...
[解决方案] Scrapy 安装时遇到：Running setup.py install for Twisted … error 解决方案
12-21
然而，在安装Scrapy过程中，有时会遇到一个常见的错误：“Running setup.py install for Twisted ... error”。这个错误通常意味着在安装Twisted时遇到了问题，可能是由于系统环境不兼容或者缺少必要的依赖。 为了...
python pip安装包出现:Failed building wheel for xxx错误的解决
09-18
今天小编就为大家分享一篇python pip安装包出现:Failed building wheel for xxx错误的解决，具有很好的参考价值，希望对大家有所帮助。一起跟随小编过来看看吧
pip安装python库时报Failed building wheel for xxx
qq_45269105的博客
04-03 1万+
pip安装python库时报Failed building wheel怎么办？保姆级解决教程！！！ python深度学习项目、psychopy/Eprime/pygame程序，欢迎咨询 TaoBao: DK数据工作室
PIP安装Python的scipy,scrapy等包出现“failed building wheel for xxx”问题解决办法
weixin_34310127的博客
05-06 2174
1.在这里下载对应的.whl文件，注意别改文件名！ http://www.lfd.uci.edu/~gohlke/pythonlibs/#lxml Ctrl + F，输入lxml，找到下面这段 Lxml, a binding for the libxml2 and libxslt libraries.lxml‑3.4.4‑cp27‑none‑win32.whllxml‑3.4.4‑cp27‑...
python安装lxml库出错_python – 在Centos 7上安装lxml – 错误：命令...
weixin_39895283的博客
11-24 497
我在虚拟环境中使用python 3.4：(af)[root@domain backend]# pip --versionpip 7.1.0 from /home/af/af-stage/backend/.ves/af/lib/python3.4/site-packages (python 3.4)安装lxml失败“错误：命令’gcc’失败,退出状态为4”：(af)[root@domain back...
成功解决“ERROR: Could not build wheels for XXX, which is required to install pyproject.toml-based proje”
热门推荐
nyh670276894的博客
01-22 7万+
试了网上很多种方法，结果都存在问题，后面又看了这个错误，发现救赎之道就在其中！报错说需要装“pyproject.toml-based”
python安装scrapy时，遇到 ERROR: Command errored out with exit status 1:…的问题
qq_25603827的博客
01-29 947
今天在windows上安装scrapy库时，遇到了如上的问题，查询了如下博文： https://blog.csdn.net/weixin_44517500/article/details/99683286 按照博文的记录，虽然在命令行中安装成功了，但是在pycharm里面导入import scrapy就会报如下的错： ImportError: DLL load failed while importing etree: 找不到指定的程序。 接着，又找到了如下这两篇文章： 1）https://bla
python之scrapy库安装错误——Building wheel for Twisted (setup.py) ... error
freshman_web的博客
06-26 5440
安装scrapy库之后，发生错误，看意思是说twisted的whell安装失败： Building wheel for Twisted (setup.py) ... error ERROR: Command errored out with exit status 1: command: 'f:\python3.8.1(32-bit)\python.exe' -u -c 'import sys, setuptools, tokenize; sys.argv[0] = '"'"'C:\\Users\\
ERROR: Failed building wheel for lxml
08-16
当你在安装 `lxml` 库时遇到 "ERROR: Failed building wheel for lxml" 错误时，这通常是由于缺少一些编译依赖项或环境配置问题导致的。以下是一些可能的解决方案： 1. 确保已安装编译工具：在某些操作系统上，你需要安装编译工具（如gcc、make等）来构建 `lxml` 的二进制包。在 Linux 上，你可以通过包管理器安装这些工具。在 Windows 上，你可以使用工具如MinGW或MSVC来安装编译工具。 2. 安装依赖项：`lxml` 依赖于 libxml2 和 libxslt 库。确保这两个库已正确安装在你的系统上。在大多数 Linux 发行版上，你可以使用包管理器来安装这些库。在 Windows 上，你可以从预编译二进制包或者使用工具如Cygwin来获取这些库。 3. 使用预编译二进制包：如果你无法成功编译 `lxml`，你可以尝试使用预编译的二进制包进行安装。你可以从 `lxml` 官方网站或者第三方Python包管理工具（如Anaconda）获取适用于你的操作系统和Python版本的二进制包。 4. 更新pip和setuptools：确保你的pip和setuptools是最新版本。可以通过运行 `pip install --upgrade pip setuptools` 命令来更新它们。 5. 使用conda进行安装：如果你使用Anaconda作为Python发行版，可以尝试使用conda来安装 `lxml`。运行 `conda install lxml` 命令来安装。 如果尝试了以上方法仍然无法解决问题，请提供更多的错误信息和你的操作系统、Python版本等相关信息，以便我能够提供更具体的帮助。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值