【Flink实战系列】Could not initialize class org.apache.hadoop.security.UserGroupInformation

最新推荐文章于 2024-08-12 08:55:09 发布

JasonLee实时计算

最新推荐文章于 2024-08-12 08:55:09 发布

阅读量3k

点赞数

分类专栏： Flink 实战系列文章标签： hadoop flink apache

本文链接：https://blog.csdn.net/xianpanjia4616/article/details/126163540

版权

Flink 实战系列专栏收录该内容

69 篇文章 474 订阅 ¥99.90 ¥299.90

订阅专栏

超级会员免费看

本文主要介绍了在Flink任务中遇到`java.lang.NoClassDefFoundError: Could not initialize class org.apache.hadoop.security.UserGroupInformation`的问题。分析了该异常可能由缺少Hadoop依赖引起，但实际上依赖已正确添加。问题的关键在于未设置Hadoop环境变量，导致异常行为。通过设置环境变量，成功解决了这个问题。

摘要由CSDN通过智能技术生成

java.lang.NoClassDefFoundError: Could not initialize class

背景说明

在 Flink 读取 hive 数据写到 kafka 的任务中，提交任务在客户端报错：

java.lang.NoClassDefFoundError: Could not initialize class org.apache.hadoop.security.UserGroupInformation
	at org.apache.hadoop.conf.Configuration$Resource.getRestrictParserDefault(Configuration.java:252)
	at org.apache.hadoop.conf.Configuration$Resource.<init>(Configuration.java:220)
	at org.apache.hadoop.conf.Configuration$Resource.<init>(Configuration.java:212)
	at org.apache.hadoop.conf.Configuration.addResource(Configuration.java:888)
	at org.apache.flink.table.catalog.hive.util.HiveTableUtil.getHadoopCo

了解本专栏