实战 - Spark SQL 整合Hive时，报错找不到mysql驱动

最新推荐文章于 2023-03-13 11:46:49 发布

初级以上

最新推荐文章于 2023-03-13 11:46:49 发布

阅读量1.9k

点赞数 1

分类专栏： Spark 文章标签： spark

本文链接：https://blog.csdn.net/Veechange/article/details/74931792

版权

在Spark SQL整合Hive时，老报错：

The specified datastore driver ("com.mysql.jdbc.Driver") was not found in the CLASSPATH. Please check your CLASSPATH specification, and the name of the driver.

尝试过：

1. 把 $HIVE_HOME/LIB 加入到 /etc/profile 的$CLASSPATH中 , 无法解决；
2. 在 $SPARK_HOME/conf/spark_env.sh 中，使用 export

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

初级以上

关注关注

1
点赞
踩
1

收藏

觉得还不错? 一键收藏
1
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

专栏目录

Spark SQL报错：The specified datastore driver (“com.mysql.jdbc.Driver“) was not found in the CLASSPATH.

zhengzaifeidelushang的博客

08-13

870

Spark SQL报错：The specified datastore driver (“com.mysql.jdbc.Driver”) was not found in the CLASSPATH. 启动Spark SQL报错： ./spark-sql Caused by: org.datanucleus.exceptions.NucleusException: Attempt to invoke the "BONECP" plugin to create a ConnectionPool gave

spark sql连接hive时找不到驱动

csdn问鼎

03-31

1348

spark sql连接hive时找不到驱动

1 条评论您还未登录，请先登录后发表或查看评论

Spark SQL读取hive数据时报找不到mysql驱动

炼剑

11-29

1105

Exception：Caused by: org.datanucleus.exceptions.NucleusException: Attempt to invoke the "BoneCP" plugin to create a ConnectionPool gave an error : The specified datastore driver ("com.mysql.jdbc.Driver

启动hiveThe specified datastore driver (com.mysql.jdbc.Driver) was not found in the CLASSPATH

01-02

6140

在进行hive-1.1.0-cdh5.7.0 的编译安装的时候再启动hive的时候出现下面的异常信息： [hadoop@zydatahadoop001 conf]$ hive which: no hbase in (/usr/java/jdk1.8.0_45/bin:/opt/software/hive/bin:/opt/software/hadoop-cdh/sbin:/opt/softw...

hive挂mysql的时候报错：jdbc driver can't be found

weixin_33816946的博客

12-13

235

需要手工拷贝 mysql-connector-java-5.1.7-bin.jar 以下目录下 /usr/share/cmf/lib/usr/lib/sqoop/lib/usr/lib/hive/lib 转载于:https://blog.51cto.com/13240596/2050398

【Hive进阶】-- Hive SQL、Spark SQL和 Hive on Spark SQL

欢迎来到我的博客，一起探索代码里的世界！

03-13

3021

Hive由Facebook开发，用于解决海量结构化日志的数据统计，于2008年贡献给 Apache 基金会。Hive是基于Hadoop的数据仓库工具，可以将结构化数据映射为一张表，提供类似SQL语句查询功能本质：将Hive SQL转化成MapReduce程序。Spark SQL主要用于结构型数据处理，它的前身为Shark，在Spark 1.3.0版本后才成长为正式版，可以彻底摆脱之前Shark必须依赖HIVE的局面。

hive on spark 集成（spark-sql 整合hive）

Siobhan_Mxin的博客

03-05

1376

hive on spark的整合配置及具体实现文档

Spark SQL整合Hive

糊里糊涂走进大数据的小菜鸡

01-05

2880

文章目录1. Spark SQL整合Hive2. SparkSQL与Hive共用元数据2.1 开启Hive元数据服务2.1.1 修改hive配置2.1.2 启动hive元数据服务2.2 拷贝hive-site.xml和mysql驱动2.3 启动SparkSQL2.4 测试 1. Spark SQL整合Hive 为什么要进行整合？由于hive原生是基于MapReduce的，导致其查询耗时较长。为了保留Hive的架构解决方案，并优化查询速度，采用SparkSql与hive整合(spark on hive)，

hive报错 spark_hive整合spark之后进入hive报错

weixin_39609822的博客

12-20

193

故障描述如下：spark和hive整合之后，spark-sql可以使用，hive直接进入会保错，保错信息如下Logging initialized using configuration in jar:file:/home/hadoop/hdfs/hive/lib/hive-common-2.3.4.jar!/hive-log4j2.properties Async: trueHive-on-MR...

The specified datastore driver ("com.mysql.jdbc.Driver") was not found in the CLASSPATH

mtj66的博客，交流WX:SpringBreeze1104

07-06

4986

Caused by: java.lang.RuntimeException: Unable to instantiate org.apache.hadoop.hive.ql.metadata.SessionHiveMetaStoreClient Caused by: org.datanucleus.exceptions.NucleusException: Attempt to invoke th

Spark SQL 读取Hive数据报错:The specified datastore driver ("com.mysql.jdbc.Driver") was not found in the C

muyingmiao的专栏

10-14

900

将Hive的配置文件拷贝到Spark中后，启动spark-shell scala> spark.sql("show databases").show 报错如下 org.datanucleus.store.rdbms.connectionpool.DatastoreDriverNotFoundException: The specified datastore driver ("com.mys...

Hive启动连接不上MySQL

MCY的博客

01-05

2955

解决办法：检查MySQL驱动jar包是否导入了Hive的bin目录，如果没导入导入，导入了还是不行，可能是jar包问题，看jar包和你的mysql版本是不是一样的。如果还不行，就要检查下配置文件了（hive-site.xml）  <property> <name>javax.jdo.option.Co...

hive安装数据库mysql查看数据库报错异常--缺少数据库驱动包或者命令连续输错

东城庞太师

01-15

588

如上图所示，输入show databases；命令后报错异常错误1 原因：没有安装数据库的驱动包解决：安装数据库的驱动包到hive安装包下面的bin目录下。再次输入命令查看： ...

下载好hive后，启动报错，连接不上mysql

qq_45736175的博客

06-27

1304

在配置好数据库以及hive后（确认用户名和密码都没错），但一直连接不上数据库 1.报错的原因 Establishing SSL connection without server's identity verification is not recommended. According to MySQL 5.5.45+, 5.6.26+ and 5.7.6+ requirements SSL connection must be established by default if explicit .

hive 找不到mysql jar包_Spark SQL读取hive数据时报找不到mysql驱动

weixin_32865081的博客

01-27

145

package com.husor.Hiveimport org.apache.spark.{SparkContext, SparkConf}import org.apache.spark.sql.hive.HiveContext/*Spark SQL执行时的sql是临时的，即用即删 **//*** Created by kelvin on 2015/1/27.*/objectRecommenda...

SPARK 启动spark-shell报错The specified datastore driver (“com.mysql.jdbc.Driver“) was not found

80后大叔爱学习

07-25

1438

错误提示：Caused by: org.datanucleus.exceptions.NucleusException: Attempt to invoke the "DBCP" plugin to create a ConnectionPool gave an error : The specified datastore driver ("com.mysql.jdbc.Driver") was...

Hive 安装部署&MySQL 安装&Hive 元数据配置到 MySQL

weixin_43955488的博客

02-07

2133

1.安装 Hive 1）把 apache-hive-3.1.2-bin.tar.gz 上传到 linux 的/opt/software 目录下 2）解压 apache-hive-3.1.2-bin.tar.gz 到/opt/module/目录下面 [atguigu@hadoop102 software]$ tar -zxvf /opt/software/apache-hive-3.1.2- bin.tar.gz -C /opt/module/ 3）修改 apache-hive-3...

sparkSql程序执行时，mysql连接找不到驱动

closeTheRain的博客

06-19

860

解决方案：在$JAVA_HOME/jre/lib/ext/下放入mysql的jdbc驱动包

spark sql读取hive数据时报找不到mysql驱动是什么问题