error: not found: value spark import spark.implicits._和not found: value spark import spark.sql

最新推荐文章于 2021-06-01 17:12:58 发布
最新推荐文章于 2021-06-01 17:12:58 发布
阅读量5.9k 收藏 7
点赞数 1
分类专栏： spark
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_44519124/article/details/105515411
版权

当启动spark的时候报这个错误

情况一：首先检查配置文件 /export/servers/spark/conf/spark-env.sh

 

情况二：如果第一步都没问题 ，就在此检查是否有这个错误

 

如果有你就查看 /export/servers/spark/jars里面是否有msql的包

如果没有将hive里面的lib下的包导入即可

 cp /export/servers/hive-1.1.0-cdh5.14.0/lib/mysql-connector-java-5.1.38.jar       /export/servers/spark/jars/

 

情况一 二都没问题后，重新进入/export/servers/spark//bin启动即可

spark-shell

 

 

 

 

 

 

 

大数据狂人
关注
  • 1
    点赞
  • 踩
  • 7
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
spark-shell 启动报错， error: not found: value spark（低级已解决）
bymain的博客
07-22 4785
查看报错原因： java.net.BindException: Cannot assign requested address: Service ‘sparkDriver’ failed after 16 retries (starting from 0)! Consider explicitly setting the appropriate port for the service ‘spa
error: not found: value SparkSession
微电子学与固体电子学-俞驰
05-05 3544
报错如下 ： error: not found: value SparkSession 解决方案: import org.apache.spark.sql.SparkSession
关于启动spark-shell报错：<console>:14: error: not found: value spark
……
12-14 1万+
当在运行spark-shell.sh时报错： :14: error: not found: value spark import spark.implicits._ ^ :14: error: not found: value spark import spark.sql报是由于spark-env.sh文件的配置错误造成的：修改后的配
【spark】import spark.implicits._ spark显示红色，无法导入问题解决办法
我是jjking`
05-28 1743
遇见的问题如下图所示： 原因是因为导入的隐士转换的 implicits._ 不是spark包里面的，而是SparkSession在bulider()之后的所产生的对象，因此需要修改一下对象。 正确结果如下
Spark Shell启动时遇到<console>:14: error: not found: value spark import spark.implicits._ <console>:14: e...
weixin_34072857的博客
02-26 1336
这里我，使用的是spark-2.2.0-bin-hadoop2.6.tgz + hadoop-2.6.0.tar.gz 的单节点来测试下。 　　其中，hadoop-2.6.0的单节点配置文件，我就不赘述了。　　 　　这里，我重点写下spark on yarn。我这里采取的是这模式。 spark-defaults.conf 　　默认，保持不修改。 ...
gyp verb `which` failed Error: not found: python2
最新发布
01-22
windows和macOS的python 2.7.18版本： python-2.7.18-macosx10.9.pkg: macOS for OS X 10.9 and later python-2.7.18.amd64.msi： Windows for AMD64/EM64T/x64 python-2.7.18.msi： Windows
Windows平台的 PHP 报错 Fatal error: Class COM not found in 的解决方法
09-30
在Windows平台上运行PHP时，有时会遇到一个特定的错误：“Fatal error: Class COM not found”。这个错误通常是由于PHP无法找到用于与COM（Component Object Model）交互的扩展模块引起的。COM是一种微软开发的技术...
Python RuntimeError: thread.__init__() not called解决方法
12-24
RuntimeError: thread.__init__() not called 复制代码 代码如下: class NotifyTread(threading.Thread):   def __init__(self, params):   threading.Thread.__init__(self) #here。。。。。。   self....
AAPT: error: resource attr/** (aka com.**.app:attr/**) not found.
01-20
问题记录 记录项目中的一个问题，不知什么时候，运行项目会出现这个错误： 解决方法 buildscript { repositories { google() jcenter() } dependencies { //之前使用的是3.5.2版本，升级成3.6.2后就出现了...
Spark: 14: error: not found: value spark ,14: error: not found: value spark
weixin_30730151的博客
06-19 1025
hdfs dfsadmin -safemode leave 转载于:https://www.cnblogs.com/yaoyu19960106/p/11049056.html
<console>:14: error: not found: value spark import spark.implicits.
aozhe0629的博客
09-29 1396
启动 ./spark-shell 出现问题 启动 hadoop, 并创建，解决 hadoop fs -mkdir /directory 　解决了　 转载于:https://www.cnblogs.com/Jomini/p/11610404.html...
Battery-Historian在win10上的详细环境搭建过程
surge
09-18 885
Battery-historian是Google在GitHub上面开源的一个很强大的电量分析工具，相对来讲安装是比较麻烦的。之前已经在win7系统上搭过一次，这次在win10上再搭一次，整体来说没有发现什么太大的区别。 Battery-Historian工具在Windows上运行主要需要有Go语言、Python、Java以及Git的支持。 环境搭建详细步骤如下： 一、 安装配置Go语言环境 1.下载：https://golang.org/doc/install（...
maven 打包scala报错问题：error: not found: object xxx
祁东握力的博客
05-13 1447
我的完整报错是：E:\daydayup\spark\src\main\scala\com\tt\KafkaSparkStreamTest.scala:3: error: not found: object kafka 就这些信息根本看不出啥。。还是靠百度，找到一篇资料说是maven仓库移动一下，然后他的文章中我看他的仓库是从路径有中文的移动到了全英文的路径下。。然后就没问题了，我也移动了maven仓库到英文路径下，然后idea setting重新设置仓库位置为英文下的那个，然后就成功了。，，可气.
Spark报错：error: not found: value metrics
Mr Zhu's little cute
06-01 1120
跑一下代码： import org.apache.spark.ml.linalg.{Vector, Vectors} import org.apache.spark.ml.stat.Summarizer val data = Seq( (Vectors.dense(2.0, 3.0, 5.0), 1.0), (Vectors.dense(4.0, 6.0, 7.0), 2.0) ) val df = data.toDF("features", "weight") val (meanVal,
在spark中使用Hive报错error: not found: value sqlContext
图特摩斯科技-博客
05-15 1万+
<console>:16: error: not found: value sqlContext import sqlContext.implicits._ ^ <console>:16: error: not found: value sqlContext import sqlContext.sql ^ raini@biyuzhe:~$ spark-shell --jars /home/raini/spa
Spark踩坑笔记(3) - 使用 SparkSession 导入 import spark.implicits._ 报错
兀坐晴窗独饮茶
06-05 9117
1. 报错 今天干了一件很傻屌的事 , 当然也是知识面不足 , 导入 import spark.implicits._ 出现了问题 我把 spark 当做了一个包 , 没想到它其实是一个 SparkSession的对象 , 注意上图 : SparkSession 对象名是 SparkSession , 不是 spark , 改成sparkSession 即可… import spark.imp...
[spark学习]之spark shell 入门
热门推荐
sunflower_cao的专栏
05-23 2万+
spark shell 是spark自带的一个快速原型开发的工具，在spark目录下面的bin目录下面，鸡
Linux启动spark显示 14: error: not found: value spark ,import spark.implicits
05-18
import org.apache.spark.sql.SparkSession import org.apache.spark.sql.functions._ ``` 3. 如果您使用的是SparkSession，请确保您已经正确创建了SparkSession对象。例如，您可以使用以下代码创建一个...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值