python3.4安装scrapy的各种坑

最新推荐文章于 2024-05-24 09:14:49 发布
最新推荐文章于 2024-05-24 09:14:49 发布
阅读量1.6k 收藏 1
点赞数
分类专栏： 安装 文章标签： python3 scrapy 安装
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_39944630/article/details/80714580
版权
本文记录了在Python3.4环境下安装Scrapy过程中遇到的问题及解决方案，包括pip安装wheel，从特定网站下载whl文件，以及解决安装Scrapy依赖时的错误。通过修改whl文件名，升级pip和安装setuptools等步骤，最终成功安装Scrapy并验证其功能。
摘要由CSDN通过智能技术生成

今天真的是要死要死的，python装一个scrapy也是各种麻烦，调了半天，现在把坑贴出来

python3如果直接装真的是各种问题出现，所以果断百度，这篇帖子帮助最大，但是这还不是问题的全部

http://blog.csdn.net/c406495762/article/details/60156205

博主首先列的问题确实是遇到了，而且解决不了，所以按照博主的方法

  • 第一步：pip3 install wheel

安装成功

scrapy运行有两个依赖加自己一共要下三个包 lxml twisted 和scrapy 注意版本 写着cp34的就是python3.4对应的包，

最低0.47元/天 解锁文章
qq_39944630
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
机器学习sklearn库的使用--部署环境（python2.7 windows7 64bit）
bruce1993的专栏
07-03 1601
最近在学习机器学习的内容，难免地，要用到Scikit-learn（sklearn，下同）这一机器学习包。为了使用sklearn库，我们需要安装python2.7，pip install工具，numpy+mkl、scipy、pandas、sklearn等开源包。其中numpy+mkl和scipy安装比较费劲，不能通过pip install工具直接安装。 各文件下载链接： Python2.7.13
解决错误：Storing debug log for failure in /root/.pip/pip.log
weixin_43590290的博客
09-05 4693
python2 pip install --upgrade pip setuptools python3 pip3 install --upgrade pip setuptools
python3运行scrapy_Python3.4 安装 Scrapy 并运行成功
weixin_40005542的博客
12-09 71
[[{"desc": [" ", " "], "title": [" About "], "link": ["/docs/en/about.html"]},{"desc": [" ", " "], "title": [" Become an Editor "], "link": ["/docs/en/help/become.html"]},{"desc": [" ",...
Python库之Scrapy的简介、安装、使用方法详细攻略
最新发布
shadowtalon的博客
05-24 808
在Scrapy中，Item是一个Python类，用于定义爬取的数据结构。编辑文件来定义你的Item。# 定义其他字段...Scrapy是一个功能强大的爬虫框架，它提供了丰富的特性来简化爬虫的开发和维护。通过本文的介绍，你应该能够安装Scrapy、创建项目、定义Item、编写Spider、运行爬虫以及存储数据。Scrapy的学习曲线可能稍微陡峭，但一旦掌握，它将大大提高你的爬虫开发效率。
安装scrapy遇到的问题
keepon的博客
05-02 361
scrapy依赖很多环境，总共要安装六个安装包，很麻烦。后来我才看到有人用conda，可以把相关的类库安装完整，但已安装了一半，就继续安装了。 问题一：自己机器是64位的，安装amd64位的，反而不行。 解决办法：安装32位解决。 问题二：安装pyOpenSSL-19.0.0-py2.py3-none-any.whl出错，报compat.py的97行解码问题。 AttributeError: ‘s...
python3.4 安装 pillow
dongjuexk的博客
12-25 2586
交待配置：      win10     已装python27,python36,默认python27 刚开始pip install pillow一直报错 报错信息： Cleaning up... Command H:\Python34\python.exe -c "import setuptools, tokenize;__file__='C:\\Users\\ADMINI~1\\...
python3.4配套的twisted
03-21
python3.4配套的twisted，安装scrapy需要安装twisted，此版本对应python3.4
win10下Python3.6安装、配置以及pip安装包教程
09-21
在本文中，我们将详细探讨如何在Windows 10操作系统中安装和配置Python 3.6，以及如何使用pip工具来管理Python包。Python 3.6是一个强大的编程语言，广泛应用于数据分析、机器学习和Web开发等领域。pip是Python的包...
scrapy-sentry:Scrapy的哨兵组件
05-10
拼命的哨兵 将Scrapy异常记录到Sentry中 一个将与粘合在一起的python库。 任何蜘蛛错误都会被推送到哨兵。 请注意，当前，其他任何地方（例如...该软件包适用于Python 2.7、3.4和3.5。 它已经通过Scrapy的1.2.1版进行
scrapy-redis：Scrapy的基于Redis的组件
02-18
Python版本：2.7、3.4+ 特征 分布式抓取/抓取 您可以启动共享单个redis队列的多个蜘蛛实例。 最适合广泛的多域爬网。 分布式后处理 报废的项目将被放入Redis队列中，这意味着您可以启动所需的共享项目队列的后处理...
python3.4 3.5 3.6 twisted适配windows
08-06
python3.4 3.5 3.6的twisted包wheel，windows，没有linux版，现在第三方扩展网站中已经没有twisted了，pypi中只有p2.7的包，这是我保存的历史版本
ubuntu pip 安装本地库，报错 Storing debug log for failure in /tmp/tmp5qtn2U
shunzi2016的博客
03-13 589
Cleaning up... Command /usr/bin/python -c "import setuptools, tokenize;__file__='/tmp/pip-c34xRZ-build/setup.py';exec(compile(getattr(tokenize, 'open', open)(__file__).read().replace('\r\n', '\n'), _...
pip .whl文件时报错xxx.whl is not a supported wheel on this platform的解决方法
liu_xzhen的博客
05-11 754
从网站下载的文件命名为 sasl‑0.2.1‑cp27‑cp27m‑win_amd64.whl 直接pip install sasl-0.2.1-cp27-cp27m-win_amd64.whl 时会报错 sasl-0.2.1-cp27-cp27m-win_amd64.whl is not a supported wheel on this platform. Storing debug log for failure in C:\Users\admin\pip\pip.log 修改文件名.
python pip安装第三方库 不见_Python中pip安装非PyPI官网第三方库的方法
weixin_36155846的博客
02-02 678
在python中安装非自带python模块，有三种方式:1.easy_install2.pip3.下载压缩包(.zip, .tar, .tar.gz)后解压， 进入解压缩的目录后执行python setup.py install命令本文主要针对pip安装时可能会碰到的一种情况，及解决办法:假如我要安装pylint模块，该模块非python自带模块，用import肯定不能导入，需要额外安装复制代码 ...
python3.4安装scrapy的步骤
qq_30990097的博客
09-25 715
在安装前可以使用  python -m pip install --upgrade pip 升级一下pip 1.安装wheel 使用命令 pip install wheel 进行安装。 2.安装Twisted 打开网址：https://www.lfd.uci.edu/~gohlke/pythonlibs/  找合适的版本下载 或者在网盘上下载python3.4   64位操作系统的T...
纯属记录一下 scrapy环境配置--基于python3.4
u014443884的专栏
07-25 870
1.The program 'pip3' is currently not installed apt-get update apt-get install python3-pip 2.fatal error: Python.h: No such file or directory apt-get install python3-dev 3. apt-get insta
python3.4 安装scrapy
dw3ginobili的博客
03-21 388
安装scrapy需要安装twisted python3.4版本下载地址http://fstab.net/pypi/simple/twisted/
python 怎么安装scrapy
04-05
1. 安装 Python：Scrapy 是 Python 编写的，所以需要先安装 Python。可以从官网下载 Python 安装程序进行安装。 2. 安装 pip：pip 是 Python 的包管理器，用于安装和管理 Python 包。在 Python 安装完成后，可以...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值