pyspark3.1.1在linux python3.5环境下报错AttributeError: ‘NoneType‘ object has no attribute ‘items‘

最新推荐文章于 2024-08-30 13:00:22 发布
最新推荐文章于 2024-08-30 13:00:22 发布
阅读量3.5k 收藏 6
点赞数 6
分类专栏： 大数据 文章标签： 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/VictorKa/article/details/116085345
版权
本文记录了作者在Linux 16.04上使用Python 3.5搭建pyspark 3.1.1环境时遇到的AttributeError问题。尝试了各种解决办法，包括查阅资料、考虑版本兼容性，最终发现pyspark 3.1.1可能不支持Python 3.5。作者通过降级到pyspark 2.4.7版本成功解决了问题。
摘要由CSDN通过智能技术生成

在搭建大数据pyspark环境时遇到的问题/坑，困扰了两三天，记录一下。

我的环境版本如下：

  • linux16.04
  • python3.5（linux自带）
  • Hadoop2.7
  • java 1.8_8u281

按照厦门大学实验室安装教程搭建环境，当时选择了最新的spark-3.1.1版本，如图：

spark版本

按照教程流程安装完后，运行pyspark失败，报错AttributeError: 'NoneType' object has no attribute 'items'。报错界面如下：

pyspark报错

百度了一下竟然没有人遇到相同的问题，就考虑可能是版本问题。用windows下的python3.6直接pip3 install pyspark，下载的版本也是pyspark-3.1.1。发现可以正常运行。查了一下spark-3.1.1目前还不是稳定版࿰

最低0.47元/天 解锁文章
VictorKa
关注
专栏目录
在Linux环境下安装JSP
01-08
apache 1.3.12 + tomcat 3.1.1 + JDK 1.2.2 + mod_jserv.so 1. 所需软件及下载 apache_1.3.12.tar.gz ...
[报错]深析AttributeError: ‘NoneType‘ object has no attribute ‘xxx‘（持更）
热门推荐
panbaoran913的博客
05-08 14万+
有相关的博客还要写它的原因在于下面的博客讲了各自的重点。因此，我将深入刨析原因，以及导致该原因出现的几种问题！ 参考博文： 《AttributeError: ‘NoneType’ object has no attribute……错误分析》 《【报错分析】AttributeError: ‘NoneType’ object has no attribute ‘xxx’》 《成功解决AttributeError: ‘NoneType’ object has no attribute ‘find_all’》
【Python报错】已解决AttributeError: ‘NoneType’ object has no attribute ‘XXXX’
qq_38614074的博客
06-04 3622
AttributeError: ‘NoneType’ object has no attribute ‘XXXX’”错误虽然常见，但只要我们掌握了其产生的原因和解决办法，就能够有效地避免和解决它。在某些情况下，即使我们进行了上述检查，也可能因为其他原因导致出现“AttributeError: ‘NoneType’ object has no attribute ‘XXXX’”错误。本文将全面解析这一错误的原因，并提供一系列实用的解决办法，帮助读者有效避免和解决此类问题。（三）在条件语句和循环中进行检查。
【Python报错】AttributeError`：`‘NoneType‘ object has no attribute ‘XXXX‘`
最新发布
鸽芷咕的博客
08-30 976
在Python编程中，`AttributeError`是一个常见的错误类型，它表示尝试访问的对象没有该属性。本文将探讨一个具体的`AttributeError`：`'NoneType' object has no attribute 'XXXX'`。我们将通过逐步推理分析，提出有针对性的解决方案。
AttributeError: 'NoneType' object has no attribute……错误分析
McGregorWwww的博客
10-26 6万+
NoneType errors 是opencv以及python中常见的一种错误类型，而且一旦出现，对于新手来说较难debug，下面简要分析一下错误的原因并给出解决方法。 原因一 这种原因是出现频率最高的一种—— cv2.imread的文件路径错误，比如： ①路径不存在； ②路径错误，不是指向图片所在位置的路径； ③路径中包含中文字符，如汉字以及【】等中文字符； 解决方法：仔细检查自己...
YOLOv5训练遇到的问题（上）
sinat_38961618的博客
05-14 7081
YOLO训练问题（上） 1.数据集制作 我是下载的一个数据集： 数据集链接：https://download.csdn.net/download/weixin_42297260/21494130?username=sinat_38961618 安装labelme，安装流程及问题 进行图片标注，点击Open Dir，选择数据集图片所在文件夹： 点击edit-> Create Rectangle（或Ctrl+R快捷键）标注新的label： 点击NextImage标记下一张图片： 所有标签标注完成
Python库 | pytest_benchmark-3.1.1-py2.py3-none-any.whl
05-09
资源分类：Python库 所属语言：Python 资源全名：pytest_benchmark-3.1.1-py2.py3-none-any.whl 资源来源：官方 安装方法：https://lanzao.blog.csdn.net/article/details/101784059
Python库 | python_opensesame-3.1.1a1-py2.py3-none-any.whl
02-19
在标题中提到的`python_opensesame-3.1.1a1-py2.py3-none-any.whl`是一个Python的轮子文件（Wheel file），它是Python包的一种预编译格式，使得安装过程更加便捷高效。`OpenSesame`库的这个版本是3.1.1a1，表明这是...
Python库 | futures-3.1.1-py3-none-any.whl
05-05
资源分类：Python库 所属语言：Python 资源全名：futures-3.1.1-py3-none-any.whl 资源来源：官方 安装方法：https://lanzao.blog.csdn.net/article/details/101784059
Python库 | aoa-3.1.1rc1-py3-none-any.whl
03-14
标题中的"Python库 | aoa-3.1.1rc1-py3-none-any.whl"指的是一个Python库的特定版本，名为"aoa"，其版本号为3.1.1的候选发布版1（rc1），适配Python 3解释器。这种格式遵循Python的wheel文件命名规范，wheel是Python...
'NoneType' object has no attribute '__getitem__'和argument of type 'NoneType' is not iterable 异常的解决办法
04-03 4万+
python多线程采集新浪微博GPS数据，存入Mongodb。Mongodb要求经纬度的严格顺序为[longtitude, latitude]，而微薄返回的顺序正好相反。所以在转换时，报出如上图所示异常：TypeError: 'NoneType' object has no attribute '__getitem__'。代码如下： #extract one from queue recor
python列表报错‘NoneType‘ object has no attribute ‘XXX‘
雪崩的博客
10-25 7709
在学习python列表时，遇到了以下问题：AttributeError: 'NoneType' object has no attribute 'XXX' 具体报错输出如下： 解决方法： 原因是： append() 函数没有返回值，即 L.append(object) --> None所以不能再赋值回去调用append() 函数返回 None，如下：
Python 中 AttributeError: ‘NoneType‘ object has no attribute ‘X‘ 错误
迹忆客
03-21 3万+
Python “” 发生在我们尝试访问 None 值的属性时，例如 来自不返回任何内容的函数的赋值。要解决该错误，请在访问属性之前更正分配。这是一个非常简单的示例，说明错误是如何发生的。尝试访问或设置None值的属性会导致错误。如果打印正在访问其属性的变量，它将为 None，因此您必须追踪变量被分配 None 值的位置并更正分配。None 值（显式赋值除外）的最常见来源是不返回任何内容的函数。请注意，我们的do_math函数没有显式返回值，因此它隐式返回 None。
问题解决之 AttributeError: ‘NoneType‘ object has no attribute ‘astype‘
qq_39220334的博客
02-12 2万+
问题描述 运行代码时，出现报错 AttributeError: 'NoneType' object has no attribute 'astype'，具体信息如下图所示： Traceback (most recent call last): File "work/person_search-master/tools/demo.py", line 82, in <module> query_feat = net.inference(query_img, query_roi).view
【Python】解决Python报错：AttributeError: ‘NoneType‘ object has no attribute ‘xxx‘
科技改变人类，技术成就未来
05-31 1万+
成功解决Python报错：AttributeError: ‘NoneType‘ object has no attribute ‘xxx‘。`AttributeError: 'NoneType' object has no attribute 'xxx'` 错误发生的常见原因包括：1. **对象未正确初始化**：变量未被正确初始化或被显式设置为 `None`。2. **函数或方法返回值为 `None`**：函数或方法返回 `None`，而你试图访问返回值的属性。3. **链式调用失败**：链式方法调用时，中
Ubuntu16.04安装spark3.1.2问题记录
qq_31866151的博客
07-31 381
在Ubuntu16.04上安装spark3.1.2时遇到了AttributeError: 'NoneType' object has no attribute 'items'问题，上网搜了一下发现https://blog.csdn.net/VictorKa/article/details/116085345中提到可能是spark3.1与python3.5不兼容，火速检查了自己的python版本，居然是2.7，这肯定不行啊！！！于是搜了各路升级python的方法，试验成功的方法如下： sudo add-a
'NoneType' object has no attribute
tan1015956962的博客
02-01 6万+
今天数据处理出现这么个异常,我这样解决的: 第一步:NoneType之所以出现是因为定义了一个变量或函数，却没有值或者返回值，因此会默认值为None 第二步:我查到使用的函数设置为没有返回值,然后赋值一个默认值none,导致下一个引用报错 这个异常碰到好几回了 ,记录一下这是我今天用的drop函数碰到的 inplace=False，默认该删除操作不改变原数据，而是返回一个执行删除操作后的新dat...
【报错分析】AttributeError: 'NoneType' object has no attribute 'xxx'
ocean_R的博客
04-18 5万+
问题背景： 通过cv2.imread读取.png格式的数据时发生如下报错： AttributeError: 'NoneType' object has no attribute 'shape' 分析： 在Python中，NoneType是一个类型，如同int、float一样。如： >>> a = None >>> type(a) <class 'Non...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值