17、【SparkSQL】org.apache.hadoop.security.HadoopKerberosName.setRuleMechanism异常

最新推荐文章于 2023-10-15 19:23:59 发布

Norni

最新推荐文章于 2023-10-15 19:23:59 发布

阅读量853

点赞数

文章标签： java 大数据 spark hadoop maven

本文链接：https://blog.csdn.net/Norni/article/details/121782729

版权

背景
当我在使用IDEA本地连接服务器spark服务时，虽然拷贝了hive-site.xml，提供了相应的依赖，仍然报错：org.apache.hadoop.security.HadoopKerberosName.setRuleMechanism
依赖如下：

<dependencies>
      <dependency>
          <groupId>org.apache.spark</groupId>
          <artifactId>spark-core_2.12</artifactId>
          <version>3.1.2</version>
      </dependency>
      <dependency>
          <groupId>org.apache.spark</groupId>
          <artifactId>spark-sql_2.12</artifactId>
          <version>3.1.2</version>
      </dependency>

      <dependency>
          <groupId>mysql</groupId>
          <artifactId>mysql-connector-java</artifactId>
          <version>8.0.25</version>
      </dependency