关于3.9以上Python使用scrapy 创建项目报错解决

最新推荐文章于 2023-12-29 17:44:49 发布
最新推荐文章于 2023-12-29 17:44:49 发布
阅读量410 收藏 1
点赞数
分类专栏： 报错记录 文章标签： python scrapy
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_44002943/article/details/132482338
版权

通过scrapy startproject 项目名 创建项目时遇到如下报错
是因为3.9之后的python 关于collections一些代码 放在了collections.abc下面
在这里插入图片描述
找到关键位置
修改为collections.abc即可解决
在这里插入图片描述
修改后！！！执行scrapy -v 版本号正常打印 创建项目也不会出现问题
在这里插入图片描述

微澜·
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
python爬虫 - 完美解决scrapy库安装失败报错，无论是windows系统还是mac系统（使用pip install scrapy安装失败，一堆红色错误提示且报超时的错误，详细解决办法教程）
高级前端工程师
01-10 3712
python，scrapy，解决Mac安装scrapy失败的问题，安装scrapy报错，解决办法，安装Scrapy失败的解决方法，scrapy安装报错解决方法，安装爬虫的scrapy框架不成功后的解决办法，解决安装scrapy库的错误及编译器冲突_python安装scrapy库错误，Scrapy安装出错，安装scrapy库失败，Windows安装scrapy报错解决办法，python在windows 虚拟环境下安装scrapy遇见安装出错的解决办法，利用pip install scrapy时安装出错，win
详解python3 + Scrapy爬虫学习之创建项目
09-19
主要介绍了python3 Scrapy爬虫创建项目，文中通过示例代码介绍的非常详细，对大家的学习或者工作具有一定的参考学习价值，需要的朋友们下面随着小编来一起学习学习吧
输入scrapy startproject 后报错AttributeError: module 'lib' has no attribute 'Cryptography_HAS_SSL_ST'
weixin_43256057的博客
05-05 758
报错如下： python@ubuntu:~/PycharmProjects/untitled$ scrapy startproject haha Traceback (most recent call last): File "/usr/local/bin/scrapy", line 7, in <module> from scrapy.cmdline import exe...
Mac python3.9安装scrapy及踩坑经验
xiaomu370的博客
04-12 1933
为什么可以，为什么不可以？最近做一个Scrapy爬虫方面的项目，作为一个初学者，Scrapy安装过程踩了很多的坑，这里记录一些经过，也记录一下相关的收获。便于个人日后复习的同时，也希望对大家有所帮助。
Scrapy 在pycharm中创建项目失败问题
m0_62516482的博客
03-11 1095
Scrapy 在pycharm中创建项目失败问题
scrapy startproject 报 no such file or directory 错误
yunzhonghefei的博客
04-14 1697
windows 第一次使用 pip install scrapy 时，可能会报错，需要手动安装Twisted-17.9.0-cp36-cp36m-win_amd64.whl。安装完成后，使用 scrapy startproject xxx 创建项目时，会报 no such file or directory 错误。推测可能是 安装 scrapy 时，系统中并没有存在依赖模块Twisted-17.9...
Pycharm+Anaconda在创建Scrapy项目时报错
jswhq1988的博客
09-06 342
我的Python 版本为3.7 使用conda install scrapy 命令安装好scrapy 这里使用Anaconda安装scrapy模块非常方便，它会告诉你所依赖的包并提示安装 下面开始创建scrapy项目 命令为scrapy startproject object_name 多个版本的python 可以使用pythonx -m scrapy startproject object_n...
终端创建scrapy项目时报错（转）
weixin_30315723的博客
11-15 294
在终端创建scrapy项目时报错 PS D:\scrapy_project> scrapy startproject fangFatal error in launcher: Unable to create process using '"' 由于在Windows下同时安装了Python2.7和python3.6.3，分别将应用程序改名为Python2.exe及Python...
(六)Scrapy框架(一) ？python+scrapy爬虫5小时入门
weixin_40771510的博客
08-03 188
Scrapy框架(一) 框架简介 Scrapy是纯Python开发的一个高效,结构化的网页抓取框架； Scrapy是用纯Python实现一个为了爬取网站数据、提取结构性数据而编写的应用框架，用途非常广泛。多用于抓取大量静态页面。 框架的力量，用户只需要定制开发几个模块就可以轻松的实现一个爬虫，用来抓取网页内容以及各种图片，非常之方便。 Scrapy 使用了 Twisted['twɪstɪd]...
Python爬虫 scrapy框架（一） 基本使用 数据解析 持久化存储
qq_38232003的博客
12-16 484
什么是框架 集成了很多功能，并且具有很强通用性的一个项目模板。（或理解成一个项目的半成品） scrapy框架 爬虫中封装好的一个明星框架。 功能： 高性能的持久化存储操作 异步的数据下载 高性能的数据解析 分布式 环境安装 Mac & Linux pip isntall scrapy Windows 1、 wheel pip install wheel 2、下载Twisted(科学上网) https://www.lfd.uci.edu/~gohlke/pythonlibs/#twisted
scrapy-redis项目打包docker镜像+部署kubernetes
fgsdgsdghdsfgrd的博客
08-20 314
项目根目录新建一个 requirement 文件，如下所示： 项目根目录新建一个Dockerfile 注意：文件不加任何后缀名！将其内容改为： 修改项目环境变量 首先确保重要redis变量，url地址等使用环境变量获取,修改下settings.py，有助于灵活修改项目 构建镜像 接下来，进入到项目更目录镜像构建，命令如下 构建过程根据Dockerfile步骤来，没有出现报错就说明构建成功 查看构建好的镜像执行： 如果需要删除镜像的话执行： 构建好，在执行之前新建一个 .env 文件，其内容如下：
Scrapy框架（一、基本使用技巧）
最新发布
景天科技苑
12-29 9236
​ Scrapy到目前为止依然是这个星球上最流行的爬虫框架. 摘一下官方给出对scrapy的介绍scrapy的特点: 速度快, 简单, 可扩展性强.​Scrapy的官方文档(英文): https://docs.scrapy.org/en/latest/安装：Linux/mac系统：pip install scrapy（任意目录下）a. pip install wheel（任意目录下） 这个是安装离线安装包来安装的工具。
Scrapy项目报错：no model name ‘xx.setting‘
to_upper的博客
01-25 1077
折腾了两三天，快放弃这个框架了，重装了pycharm2021版本，重装了各种包，还是不行。我反复检查settings.py中的设置，甚至还读了源码，找了各种解答，都没有解决。着急上火的时候，改了一下文件名，再试试就行了，就挺傻宝的。 原来的文件名：带有数字、空格和小数点 新文件名： 然后就好了，可以运行了 思考了一下原因，可能是框架的文件识别方式，找不到这个文件名了，所以最好还是用全英文和下划线（_）的命名方式比较保险。说不定你也是因为命名的问题。 我的项目是新建的，简单的项目，不太会因为文件夹路径
创建scrapy项目终端输入scrapy startproject 项目名时报错的一种：cannot import name ‘PseudoElement‘ from ‘cssselect.parse
weixin_53847230的博客
05-31 1168
搜了很多网上的解决方法都没用，最后小bing帮忙解决了，来谢谢小bing报错如下：解决方法： 终端中分别查看版本： 然后后面我输入scrapy startproject 项目名 又遇到一个问题：报错：ImportError: cannot import name 'ParamSpec' from 'typing_extensions' (e:\anaconda3\lib\site-packages\typing_extensions.py)解决方法：终端输入： 再次输入 命令问题解决
【python爬虫】创建一个scrapy项目文件夹，出现错误“Cannot create a spider with the same name as your project”怎么办？
fiao_的博客
12-08 2239
第一步，打开cmd，进入你要创建文件夹的位置： （这里显示的是进入电脑的E:\dasan-shang\python\practice\2） 第二步，在这个文件夹下创建你想要创建的文件： 输入：scrapy startproject douban（“douban”是创建的文件名） （这样显示即创建成功） 第三步，进入你所创建的文件夹中： 第四步，在Spider下面创建scrapy爬虫： 输入：scrapy genspider doubantop250 https://movie.douban.com/t
scrapy安装成功，但是命令行startproject失败
MInNrz的Love&Share
02-17 8365
首先scrapy已经确定安装成功了，如图： 但是在cmd中输入scrapy startproject mingyan报错，如下： Traceback (most recent call last): File "D:\ProgramData\Anaconda3\Scripts\scrapy-script.py", line 10, in &lt;module&gt; sys....
Scrapy安装成功，但命令startproject失败
zhiwei2012的博客
08-01 1620
解决scrapy创建项目失败异常问题汇总问题一 lxml问题：==ImportError: cannot import name 'etree'==问题二 cryptography问题：==ImportError: DLL load failed: %1 不是有效的 Win32 应用程序。====ImportError: DLL load failed: 操作系统无法运行1%== 这个可能解决其它...
如果你scrapy startproject报错找不到某个库，安装还找不到这个库，可能是因为这个原因
HowToPause的博客
10-14 681
使用指令scrapy startproject 创建爬虫工程的时候，当前目录及其父目录及以上的所有目录不能有scrapy.cfg配置文件。
Scrapy新建项目出错解决方法
dj1174232716的专栏
11-29 4851
最近准备学一下Scrapy爬虫框架,结果新建项目时总是报错,错误如下: 报错说是缺少_monkeypatches模块,但是这个模块却没有,仔细看看,scrapy用的是python3的解释器,但查资料发现scrapy只支持2.7以后的版本,所以将 /usr/local/bin/scrapy命令的第一行的解释器换成python2就解决了! 第一行:#!/usr/bin/python3
创建scrapy项目报错
07-25
希望以上方法能够帮助你解决创建scrapy项目报错的问题。如果问题仍然存在，请提供更多的错误信息以便我们进一步帮助你解决。 #### 引用[.reference_title] - *1* [终端创建scrapy项目时报错（转）]...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值