![](https://img-blog.csdnimg.cn/20201014180756923.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
运行报错
威少的书童
这个作者很懒,什么都没留下…
展开
-
RuntimeError with copy_() and expand() - Unsupported operation: more than one element of the written
python深度学习报错原创 2022-05-31 20:37:58 · 315 阅读 · 0 评论 -
TypeError: __init__() got an unexpected keyword argument ‘downsample‘
报错原因是因为自己把初始化函数__init__()打错了。打成了__int__()。原创 2022-02-26 18:57:10 · 974 阅读 · 0 评论 -
Message: stale element reference: element is not attached to the page document
报错原因:这样的错误是说我已经点击了翻页,但是还没有完成翻页,于是又爬了一次当前页,然后再要执行翻页时页面已经刷新了,前面找到的翻页元素已经过期了,无法执行点击。当然最有效的方法是在点击翻页后强制sleep几秒,但是这样会浪费时间,而且太low了。但是没办法呀,太菜了我,暂时想不到其他什么高效简洁的方法。...原创 2021-06-19 14:49:21 · 2525 阅读 · 1 评论 -
linux文件权限报错
解决办法,在命令行里面输入如下所示命令,注意根据实际操作的路径文件来修改/tmphadoop fs -chmod 777 /tmp原创 2021-06-18 16:22:16 · 427 阅读 · 0 评论 -
Classification metrics can‘t handle a mix of multiclass-multioutput and binary targets报错
报错截图在使用模型评估指标的时候出现了报错,后来发现是因为传入函数的预测结果标签和真实标签的数据属性数量不同,真实标签数据多加了一列序号,因此报错。只需要将传入的数据列数保持一致即可解决问题了。...原创 2021-06-09 22:32:48 · 5256 阅读 · 1 评论 -
Spark-SQL中Where语句的等式判断用===
SparkSQl里面的where语句里面判断等式两边相等是用 === 和其他编程语言中的两个等于号不同!报错代码:df.select("CustomerID").where(col("InvoiceNo")=="551845")正确的写法df.select("CustomerID").where(col("InvoiceNo")==="551845")正确执行...原创 2020-11-17 14:00:28 · 2820 阅读 · 0 评论 -
数据维度错误——ValueError: shapes (2778,) and (269,67) not aligned: 2778 (dim 0) != 269 (dim 0)
先来附上错误的源代码import pandas as pdimport numpy as npfrom random import shufflefrom numpy.linalg import invimport matplotlib.pyplot as pltfrom math import floor, logimport osdef dataProcess_X(Data): listObjectColumn = [col for col in Data.columns if原创 2020-11-10 22:32:33 · 696 阅读 · 2 评论 -
Permission denied: user=29671, access=WRITE, inode=“/“:root:supergroup:drwxr-xr-x
今天在自己的windows的Intellij环境里面运行spark进行hdfs文件存储操作的时候遇到了这个错误。原因是windows的用户没有写的权限办法就是在linux系统里面运行这一句hadoop fs -chmod 777 /注意必须启动hadoop以后再运行,即将hdfs的根目录的权限修改成所有用户都可以操作。参考文章链接:参考文章...原创 2020-11-14 18:01:29 · 165 阅读 · 0 评论 -
java.lang.NoClassDefFoundError: com/huaban/analysis/jieba/JiebaSegmenter
今天在写spark词频统计的时候在本地intellij中结果没有任何问题,但是打包成jar包提交到spark-shell中就报了错误,我估摸着是那个地方少了导致spark-shell里面无法找到依赖包,后来听老师说才知道我在intellij中打包的时候没有加入依赖包。所以只要加入下面这两个依赖包就行了添加方法如图然后重新编译上传到spark-shell中就可以啦!...原创 2020-11-14 19:46:03 · 1006 阅读 · 2 评论 -
java.lang.RuntimeException: The 6th field ‘CustomerID‘ of input row cannot be null
今天在写Spark-Sql的时候过滤数据一报错看下错误截图错误代码:这两句都是判断字符串是否为空!再来看一下原数据集里面的情况我认真检查了一下,确实只有第二列和第七列数据存在缺失值所以我过滤掉这两列的缺失值思路没有错,错误的原因在于:字符串空值和null不是一个概念在DataFrame中缺失值是用null表示的,而我前面的错误代码也就是这两句!x._3.isEmpty &&!x._7.isEmpt是判断字符串是否为空!而不是判断是否为null,所以不会把缺失值nu原创 2020-11-17 10:44:42 · 653 阅读 · 0 评论 -
Exception in thread “main“ java.lang.IllegalStateException: No active or def
报错截图:解决办法将这一句代码删除掉val spark = SparkSession.active用这一句自主创建一个Session //创建Session对象 val spark = SparkSession.builder().master("local[*]").appName("Test") .getOrCreate()原创 2020-11-15 16:54:08 · 1790 阅读 · 0 评论