idea上创建Spark项目，执行报错如下

最新推荐文章于 2021-08-26 15:10:33 发布
最新推荐文章于 2021-08-26 15:10:33 发布
阅读量732 收藏
点赞数
文章标签： Spark
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/sinat_33957978/article/details/83758888
版权

Error:scalac: Error: None.get
java.util.NoSuchElementException: None.get

at scala.None$.get(Option.scala:349)

at scala.None$.get(Option.scala:347)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.$anonfun$mkLambdaMetaFactoryCall$4(Delambdafy.scala:92)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.mkLambdaMetaFactoryCall(Delambdafy.scala:92)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.transformFunction(Delambdafy.scala:258)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.transform(Delambdafy.scala:265)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.transform(Delambdafy.scala:56)

at scala.reflect.internal.Trees.itransform(Trees.scala:1378)

at scala.reflect.internal.Trees.itransform$(Trees.scala:1348)

at scala.reflect.internal.SymbolTable.itransform(SymbolTable.scala:16)

at scala.reflect.internal.SymbolTable.itransform(SymbolTable.scala:16)

at scala.reflect.api.Trees$Transformer.transform(Trees.scala:2555)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.transform(TypingTransformers.scala:44)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.transform(Delambdafy.scala:293)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.transform(Delambdafy.scala:56)

at scala.reflect.api.Trees$Transformer.$anonfun$transformTrees$1(Trees.scala:2559)

at scala.reflect.api.Trees$Transformer.transformTrees(Trees.scala:2559)

at scala.reflect.internal.Trees.itransform(Trees.scala:1359)

at scala.reflect.internal.Trees.itransform$(Trees.scala:1348)

at scala.reflect.internal.SymbolTable.itransform(SymbolTable.scala:16)

at scala.reflect.internal.SymbolTable.itransform(SymbolTable.scala:16)

at scala.reflect.api.Trees$Transformer.transform(Trees.scala:2555)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.transform(TypingTransformers.scala:44)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.transform(Delambdafy.scala:293)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.transform(Delambdafy.scala:56)

at scala.reflect.internal.Trees.$anonfun$itransform$1(Trees.scala:1369)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.atOwner(TypingTransformers.scala:30)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.atOwner(TypingTransformers.scala:25)

at scala.reflect.internal.Trees.itransform(Trees.scala:1368)

at scala.reflect.internal.Trees.itransform$(Trees.scala:1348)

at scala.reflect.internal.SymbolTable.itransform(SymbolTable.scala:16)

at scala.reflect.internal.SymbolTable.itransform(SymbolTable.scala:16)

at scala.reflect.api.Trees$Transformer.transform(Trees.scala:2555)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.transform(TypingTransformers.scala:44)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.transform(Delambdafy.scala:293)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.transform(Delambdafy.scala:56)

at scala.reflect.api.Trees$Transformer.$anonfun$transformStats$1(Trees.scala:2589)

at scala.reflect.api.Trees$Transformer.transformStats(Trees.scala:2587)

at scala.reflect.internal.Trees.itransform(Trees.scala:1378)

at scala.reflect.internal.Trees.itransform$(Trees.scala:1348)

at scala.reflect.internal.SymbolTable.itransform(SymbolTable.scala:16)

at scala.reflect.internal.SymbolTable.itransform(SymbolTable.scala:16)

at scala.reflect.api.Trees$Transformer.transform(Trees.scala:2555)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.transform(TypingTransformers.scala:44)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.transform(Delambdafy.scala:293)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.transform(Delambdafy.scala:56)

at scala.reflect.internal.Trees.$anonfun$itransform$2(Trees.scala:1375)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.atOwner(TypingTransformers.scala:30)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.atOwner(TypingTransformers.scala:25)

at scala.reflect.internal.Trees.itransform(Trees.scala:1373)

at scala.reflect.internal.Trees.itransform$(Trees.scala:1348)

at scala.reflect.internal.SymbolTable.itransform(SymbolTable.scala:16)

at scala.reflect.internal.SymbolTable.itransform(SymbolTable.scala:16)

at scala.reflect.api.Trees$Transformer.transform(Trees.scala:2555)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.transform(TypingTransformers.scala:44)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.transform(Delambdafy.scala:293)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.transform(Delambdafy.scala:56)

at scala.reflect.api.Trees$Transformer.$anonfun$transformStats$1(Trees.scala:2589)

at scala.reflect.api.Trees$Transformer.transformStats(Trees.scala:2587)

at scala.reflect.internal.Trees.itransform(Trees.scala:1416)

at scala.reflect.internal.Trees.itransform$(Trees.scala:1348)

at scala.reflect.internal.SymbolTable.itransform(SymbolTable.scala:16)

at scala.reflect.internal.SymbolTable.itransform(SymbolTable.scala:16)

at scala.reflect.api.Trees$Transformer.transform(Trees.scala:2555)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.super$transform(TypingTransformers.scala:40)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.$anonfun$transform$1(TypingTransformers.scala:40)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.atOwner(TypingTransformers.scala:30)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.transform(TypingTransformers.scala:25)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.transform(Delambdafy.scala:279)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.transform(Delambdafy.scala:56)

at scala.reflect.api.Trees$Transformer.transformTemplate(Trees.scala:2563)

at scala.reflect.internal.Trees.$anonfun$itransform$4(Trees.scala:1420)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.atOwner(TypingTransformers.scala:30)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.atOwner(TypingTransformers.scala:25)

at scala.reflect.internal.Trees.itransform(Trees.scala:1419)

at scala.reflect.internal.Trees.itransform$(Trees.scala:1348)

at scala.reflect.internal.SymbolTable.itransform(SymbolTable.scala:16)

at scala.reflect.internal.SymbolTable.itransform(SymbolTable.scala:16)

at scala.reflect.api.Trees$Transformer.transform(Trees.scala:2555)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.transform(TypingTransformers.scala:44)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.transform(Delambdafy.scala:293)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.transform(Delambdafy.scala:56)

at scala.reflect.api.Trees$Transformer.$anonfun$transformStats$1(Trees.scala:2589)

at scala.reflect.api.Trees$Transformer.transformStats(Trees.scala:2587)

at scala.reflect.internal.Trees.$anonfun$itransform$7(Trees.scala:1438)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.atOwner(TypingTransformers.scala:30)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.atOwner(TypingTransformers.scala:25)

at scala.reflect.internal.Trees.itransform(Trees.scala:1438)

at scala.reflect.internal.Trees.itransform$(Trees.scala:1348)

at scala.reflect.internal.SymbolTable.itransform(SymbolTable.scala:16)

at scala.reflect.internal.SymbolTable.itransform(SymbolTable.scala:16)

at scala.reflect.api.Trees$Transformer.transform(Trees.scala:2555)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.super$transform(TypingTransformers.scala:40)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.$anonfun$transform$2(TypingTransformers.scala:42)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.atOwner(TypingTransformers.scala:30)

at scala.tools.nsc.transform.TypingTransformers$TypingTransformer.transform(TypingTransformers.scala:25)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.transform(Delambdafy.scala:293)

at scala.tools.nsc.transform.Delambdafy$DelambdafyTransformer.transform(Delambdafy.scala:56)

at scala.tools.nsc.ast.Trees$Transformer.transformUnit(Trees.scala:140)

at scala.tools.nsc.transform.Transform$Phase.apply(Transform.scala:30)

at scala.tools.nsc.Global$GlobalPhase.$anonfun$applyPhase$1(Global.scala:436)

at scala.tools.nsc.Global$GlobalPhase.applyPhase(Global.scala:429)

at scala.tools.nsc.Global$GlobalPhase.$anonfun$run$1(Global.scala:400)

at scala.tools.nsc.Global$GlobalPhase.$anonfun$run$1$adapted(Global.scala:400)

at scala.collection.Iterator.foreach(Iterator.scala:929)

at scala.collection.Iterator.foreach$(Iterator.scala:929)

at scala.collection.AbstractIterator.foreach(Iterator.scala:1417)

at scala.tools.nsc.Global$GlobalPhase.run(Global.scala:400)

at scala.tools.nsc.Global$Run.compileUnitsInternal(Global.scala:1452)

at scala.tools.nsc.Global$Run.compileUnits(Global.scala:1436)

at scala.tools.nsc.Global$Run.compileSources(Global.scala:1429)

at scala.tools.nsc.Global$Run.compile(Global.scala:1545)

at xsbt.CachedCompiler0.run(CompilerInterface.scala:115)

at xsbt.CachedCompiler0.run(CompilerInterface.scala:94)

at xsbt.CompilerInterface.run(CompilerInterface.scala:22)

at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)

at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)

at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)

at java.lang.reflect.Method.invoke(Method.java:498)

at sbt.compiler.AnalyzingCompiler.call(AnalyzingCompiler.scala:101)

at sbt.compiler.AnalyzingCompiler.compile(AnalyzingCompiler.scala:47)

at sbt.compiler.AnalyzingCompiler.compile(AnalyzingCompiler.scala:41)

at org.jetbrains.jps.incremental.scala.local.IdeaIncrementalCompiler.compile(IdeaIncrementalCompiler.scala:32)

at org.jetbrains.jps.incremental.scala.local.LocalServer.compile(LocalServer.scala:26)

at org.jetbrains.jps.incremental.scala.remote.Main$.make(Main.scala:68)

at org.jetbrains.jps.incremental.scala.remote.Main$.nailMain(Main.scala:25)

at org.jetbrains.jps.incremental.scala.remote.Main.nailMain(Main.scala)

at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)

at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)

at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)

at java.lang.reflect.Method.invoke(Method.java:498)

at com.martiansoftware.nailgun.NGSession.run(NGSession.java:319)

解决方法：
缺少Scala的依赖，在Project Structure下Global Libraries中添加上本地Scala的依赖即可

七里笙的青灯
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Scala中的None,Nothing,Null,Nil
weixin_30670151的博客
06-13 453
在scala中这四个类型名称很类似，作用确实完全不同的。 None是一个object，是Option的子类型，定义如下 case object None extends Option[Nothing] { def isEmpty = true def get = throw new NoSuchElementException("None.get") } scala推...
java.util.NoSuchElementException: None.get
leidaw的博客
01-13 2212
运行scala程序时报错 1检查发现get方法发现没有取到数据。 2对数据来源用正则表达式过滤，发现取出部分为空数据 3打开源数据文档，查看源数据文件其中 不同行"/t" 和 "" 部分混淆 4重写正则表达式重新过滤数据 以后还得在使用get方法前用下判断一下数据来源是不是空 ...
java 获取dataset_例外情况java.util.NoSuchElementException: 无。获取在Spark Dataset save（）操作中...
weixin_39729837的博客
02-25 223
我有个例外”java.util.NoSuchElementException: 无。获取“当我试图将 DataSet 作为拼花保存到s3存储时：例外情况：java.lang.IllegalStateException: Failed to execute CommandLineRunnerat org.springframework.boot.SpringApplication.callRunne...
spark needsUnsafeRowConversion java.util.NoSuchElementException: None.get
monkeyboy_tech的博客
12-29 1389
spark版本 3.0.1 在spark 中引入了一个bug，该bug的详细信息如下： None.get java.util.NoSuchElementException: None.get scala.None$.get(Option.scala:529) scala.None$.get(Option.scala:527) org.apache.spark.sql.execution.FileSourceScanExec.needsUnsafeRowConversion$lzycompute(DataSo
详解IntelliJ IDEA创建spark项目的两种方式
08-26
"IntelliJ IDEA创建Spark项目的两种方式" IntelliJ IDEA是进行 Scala 开发的一个非常好用的工具，可以非常轻松查看 Scala 源码，当然用它来开发 Java 也是一样爽的。在使用 IntelliJ IDEA 创建 Spark 项目时，需要...
解决idea导入ssm项目启动tomcat报错404的问题
08-27
解决Idea导入SSM项目启动Tomcat报错404的问题 本文旨在解决Idea中导入SSM项目启动Tomcat时报错404的问题，提供了一种有效的解决方案。该方案通过在pom文件中添加特定的配置信息，解决了Idea无法识别Tomcat和JDK的...
用IDEA创建一个SSH项目.doc
07-02
IDEA 中创建 SSH 项目的详细步骤和配置 在本文中，我们将详细介绍如何使用 IDEA 创建一个 SSH 项目，包括项目的创建、配置和启动过程。 创建 Maven Web 项目 首先，我们需要在 IDEA 中创建一个新的 Maven 项目。...
idea使用maven创建web项目详细教程
02-23
IDEA 使用 Maven 创建 Web 项目详细教程 本教程将指导您使用 IDEA 创建一个 Maven Web 项目，从安装 Maven 到配置 Maven 环境、创建 Maven 工程、pom.xml 文件配置、依赖管理等。 1. 安装 Maven 在 IDEA 中使用 ...
IDEA创建parent项目(聚合项目)
08-25
IDEA创建parent项目(聚合项目) IDEA创建parent项目(聚合项目)是指使用IDEA工具创建继承和聚合项目的过程。本文将通过示例代码详细介绍该过程，涵盖了创建空白工程、创建maven父项目、创建maven子项目、创建聚合项目...
IDEA在安装Scala插件后可能出现的问题Error:scalac:Error compiling the sbt component compiler-interface-2.11.8-57.0
mxl1024的博客
03-09 6310
IDEA在安装Scala插件后可能出现的问题 运行程序出现Error:scalac: Error: Error compiling the sbt component ‘compiler-interface-2.11.8-57.0’ 注：Scala版本（2.11.8） 一个解决方法 解决方向：版本兼容 在IDEA导航栏依次点击File→Project Structure 在Project Setting的Project中选择Java版本1.8并确定配置。 程序即可运行 ...
IDEA中执行scala程序报错Error:scalac: Error: scala/Function1 java.lang.NoClassDefoundError：Scala/Function1
GabrielCP的博客
05-10 2602
** 首先 ** <dependency> <groupId>org.scala-lang</groupId> <artifactId>scala-library</artifactId> <version>2.11.8</version> </dependency> 引入上面依赖然后再次build project （跟项目版本保持一致） 如果还是报错，重启IDEA，再次build pr
java.lang.NoClassDefFoundError：scala / reflect / internal / Trees
zouyang920的博客
02-04 1084
一般是因为安装scala版本与sdk版本不一致，换成一直后问题解决。
java none_Spark--java.util.NoSuchElementException: None.get at at
weixin_39632293的博客
02-24 865
有时候在编写Spark代码的时候本地调试通过但是提交到集群后无法运行，报如下错误：java.util.NoSuchElementException: None.get at at .......出现原因出现这种报错的原因是Scala中null或None的错误使用；或是对空值没有做任何处理时可能会任何语言都有一种方式来表示“空”，java中使用null来表示，在Scala中用None来表示！None...
flink工程启动报错解决
jimmy810606的博客
01-07 985
idea启动flink工程报错： Error:scalac: Error: scala.collection.immutable.$colon$colon.tl$1()Lscala/collection/immutable/List; java.lang.NoSuchMethodError: scala.collection.immutable.$colon$colon.tl$1()Lscala...
用IDEA Maven构建scala项目
Buevara的博客
08-26 2521
步骤一：在IDEA上安装scala插件 步骤二：在projrect structure的global Libraries添加scala文件包 前两步参考https://zhuanlan.zhihu.com/p/55450219 前3步 步骤四：选择新建Maven项目 点击Create from archetype 选择红色2的scala 点击next 步骤五： 生成文件目录： 运行App.sca...
Scala基础语法
Oak_Komorebi的博客
08-02 460
1 变量与类型 val修饰的变量，相当于Java中final修饰的变量 // 定义常量s1，使用字符串"1"赋值，自动推断为String类型，值不可变 val s1 = "1" // 定义常量s2，手动指定类型为String，此时需要保证所赋值类型匹配 val s2: String = "2" // 使用val定义基本数据类型时，值不可变，可以使用val重新定义 注意：变量声明一定要初始化 变量推断 含义：声明变量时，可以不指定变量类型，编译器会根据赋值内容自动推断当前变量的类型。 // 定
java.util.NoSuchElementException: None.get的解决方法
weixin_30239339的博客
04-07 2954
在Java中用null表示无值返回。在Java 里，null 是一个关键字，不是一个对象，所以对它调用任何方法都是非法的 笔者就常在类型转换时见到空指针错误，便是由null的特殊性导致的 而在scala中，对map类型使用get时，返回的是Option类型 Option类型 而为了进一步得到value，一般再进行一次get 于是，当对No...
scalac: Error: Error compiling the sbt component ‘compiler-interface-2.11.8-55.0‘
weixin_49520007的博客
08-26 5446
scalac: Error: Error compiling the sbt component ‘compiler-interface-2.11.8-55.0’ 报错 scalac: Error: Error compiling the sbt component 'compiler-interface-2.11.8-55.0' sbt.internal.inc.CompileFailed: Error compiling the sbt component 'compiler-interface-2.1
idea创建springboot项目总是报错
最新发布
08-17
当使用IDEA创建Spring Boot项目时，出现"Error: connect timed out"错误可能有几个原因。 首先，这个错误可能是由于网络连接问题造成的。请确保你的网络连接正常，并且可以访问所需的资源。你可以尝试使用其他网络进行创建项目，或者检查防火墙设置是否对IDEA进行了限制。 另外，这个错误也可能是由于IDEA配置不正确导致的。你可以检查一下IDEA的代理设置是否正确，并确保IDEA可以正常访问所需的资源。 此外，还有一种可能是由于创建项目时选择的依赖或模板有问题。有些依赖可能需要从远程仓库下载，如果该仓库无法访问或速度较慢，就会出现连接超时的错误。你可以尝试更换依赖或者使用本地仓库来解决这个问题。 综上所述，如果你在使用IDEA创建Spring Boot项目时遇到"Error: connect timed out"错误，建议你检查网络连接和代理设置，并确保所选的依赖和模板可用。如果问题仍然存在，你可以尝试使用其他方式创建项目，比如使用Spring Initializr的网页版创建项目。 <span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *3* [idea里面新建springboot时报错](https://blog.csdn.net/laofoye123/article/details/122825548)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT3_1"}}] [.reference_item style="max-width: 50%"] - *2* [IDEA创建一个springboot项目教程（过程中各种报错解决）](https://blog.csdn.net/qq_51580852/article/details/127171360)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v92^chatsearchT3_1"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值