flume系列之：java.lang.IllegalArgumentException: Can‘t get Kerberos realm

最新推荐文章于 2024-09-18 18:11:13 发布
最新推荐文章于 2024-09-18 18:11:13 发布
阅读量1.9k 收藏 1
点赞数 1
分类专栏： flume 文章标签： flume系列 Kerberos realm
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/zhengzaifeidelushang/article/details/126645967
版权
flume 专栏收录该内容
70 篇文章 20 订阅 ¥29.90 ¥99.00
订阅专栏
在配置Flume时遇到了一个错误，错误信息为`java.lang.IllegalArgumentException: Can’t get Kerberos realm`。解决方法包括检查keytab文件的权限和核实`/etc/krb5.conf`文件中的Kerberos地址和realm信息。
摘要由CSDN通过智能技术生成

flume系列之：java.lang.IllegalArgumentException: Can't get Kerberos realm

一、完整报错

  • 01 Sep 2022 15:27:11,548 ERROR [lifecycleSupervisor-1-0-EventThread] (org.apache.flume.node.AbstractConfigurationProvider.loadSinks:469) - Sink sink1 has been removed due to an error during configuration
    java.lang.IllegalArgumentException: Can’t get Kerberos realm

二、解决方法

  • 确定keytab文件权限
  • 查看/etc/krb5.conf文件里面存放的kerberos的信息，确定kerberos地址和realm信息
快乐骑行^_^
关注
专栏目录
订阅专栏
flume报错：java.lang.NoClassDefFoundError: org/apache/hadoop/conf/Configuration
zhengzaifeidelushang的博客
08-03 2385
flume报错：java.lang.NoClassDefFoundError: org/apache/hadoop/conf/Configuration Failed to start agent because dependencies were not found in classpath. Error follows. java.lang.NoClassDefFoundError:org/apache/hadoop/conf/Configuration at org.apache.flume.sin
flume1.9往hdfs写报错：java.lang.NoSuchMethodError: com.google.common.base.Preconditions.checkArgument
zhengzaifeidelushang的博客
04-24 624
flume往hdfs写报错：java.lang.NoSuchMethodError: com.google.common.base.Preconditions.checkArgument(ZLjava/lang/String;Ljava/lang/Object;)V 这个错误是因为flume内依赖的guava和hadoop内guava版本不一致导致的。 解决方法： 首先确认hadoop和flume的guava版本 hadoop查看guava路径是：/moudle/hadoop-3.3.0/share/had
Can't get Kerberos realm
weixin_33827965的博客
01-19 4859
1. Can't get Kerberos realm 原因分析： 原始代码为： org.apache.hadoop.security.UserGroupInformation.setConfiguration(conf) sun.security.krb5.Config.refresh() 　　 首先根据传进来的Hadoop配置conf，去设置UserGroupInfo...
异常解决:java.lang.IllegalArgumentException: Can't get Kerberos realm
热门推荐
BlackC16的博客
03-01 2万+
问题描述:java连接hbase通过kerberos认证过程中,出现异常java.lang.IllegalArgumentException: Can't get Kerberos realm,具体异常的原因为Caused by: KrbException: Cannot locate default realm 解决过程: 项目环境:使用的是jdk1.8,hadoop-commo...
java.lang.IllegalArgumentException: Can‘t get Kerberos realm at org.apache.hadoop.security.HadoopKe
*** 唐芮棋_Rachel ***
12-16 2745
原因：找了半天，krb5.conf,impala.keytab的路径问题！！！！！ 原路径: src/main/conf/krb5.conf 如图 修改后的路径: 绝对路径： "D:/AmyTest/test/src/conf/impala.keytab" 相对路径：/test/src/conf/impala.keytab 记录一下，以备不时之需！！！！ ...
踩坑——Doris,Can‘t get Kerberos realm, cause by: Can‘t get Kerberos realm
@羲凡—只为更好的活着
11-03 2244
踩坑——Doris,Can't get Kerberos realm, cause by: Can't get Kerberos realm
Kerberos认证报错:can’t get kerberos realm
hyv5478的博客
05-28 1万+
1.确定下加载user.keytab的路径位置 2.确定调用位置
Can‘t get Kerberos realm
最新发布
bruce128的专栏
09-18 740
近期搞Ozone开发，需要走kerberos登陆，遇到了一个问题，花了很长时间解决。记录一下，跟网上能搜到的不大一样。
flume报错 java.lang.OutOfMemoryError: Java heap space已解决
weixin_46122692的博客
11-26 1901
1、详细报错信息 在用flume收集kafka中数据到hdfs中内存溢出了 2020-11-26 17:41:25,679 (kafka-coordinator-heartbeat-thread | flume) [ERROR - org.apache.kafka.clients.consumer.internals.AbstractCoordinator$HeartbeatThread.run(AbstractCoordinator.java:1083)] [Consumer clientId=consu
flume抽取数据时：java.lang.OutOfMemoryError: GC overhead limit exceeded
qq_44982182的博客
08-13 533
flume抽取数据时：java.lang.OutOfMemoryError: GC overhead limit exceeded错误 错误日志如下： Exception in thread "PollableSourceRunner-SQLSource-r1" java.lang.OutOfMemoryError: GC overhead limit exceeded at org.keedio.flume.source.SQLSource$ChannelWriter.write(SQLS
Yarn-cluster模式下，can‘t get Kerberos realm
weixin_42635649的博客
09-03 2060
can't get kerberos realm解决
解决Unable to locate Kerberos realm
weixin_30723433的博客
05-05 953
在windows环境下 将服务器上的/etc/krb5.conf 复制到<jdk-home>/jre/lib/security 转载于:https://www.cnblogs.com/sprinng/p/5461223.html
kerberos mysql配置_mysql到HDFS,kerberos配置报错 Can't get Kerberos realm
weixin_30985047的博客
02-01 2970
报错日志如下，麻烦解惑2018-07-10 08:10:13.144 [main] INFO VMInfo - VMInfo# operatingSystem class => sun.management.OperatingSystemImpl2018-07-10 08:10:13.161 [main] INFO Engine - the machine info =>osIn...
我遇到的can't get master kerberos principal问题解决
CSDN_wsr的博客
07-19 3869
我遇到的can’t get master kerberos principal问题解决 代码用eclipse编写打包，shell脚本里面调度执行，因为换了新的平台有Kerberos认证，所以需要在代码中配置 System.setProperty(“java.security.krb5.conf”,“krb5的路径（本地测试写本地相对路径，堡垒机跑写堡垒机路径）”) UserGroupInforma...
求解求解Kerberos连接DataGrip报错
inseddie的博客
06-18 520
java通过Kerberos认证方式连接hive
weixin_44144092的博客
05-05 2400
在数据源管理功能中，需要适配mysql、postgresql、hive等数据源。mysql和postgresql连接方式一致，只需要驱动和jdbcurl即可，而hive背后是大数据集群，多采用Kerberos的方式保护集群环境，要想与大数据集群正常交互，需要经过kdc认证获取ticket，因此获取hive连接前需要先通过Kerberos认证。
Hive连接+Kerberos认证各种报错及解决办法汇总
一立方星空
12-08 8267
一、环境描述 1.1、项目环境 使用 SpringBoot2.2.1 + MySQL5.7.6 + Shiro + MyBatis + Hive + Hadoop，多模块化，多连接池多数据源管理。 1.2、部署环境 Linux环境下，Hive和Hadoop主机采用的是CDH版本，采用容器化部署方式。 Hadoop 2.6.0-cdh5.14.0 Apache Hive (version 1.1.0-cdh5.14.0) 二、遇到的问题及解决办法 就是连这么个服务器的Hive库，花费了很多时间，也踩了非常
通过java访问带有kerbores认证的impala,hive
weixin_42656794的博客
12-06 1099
因为公司需求要开发一个数据质量监控的组件，需要连接集群上的hive,impala。 1集群采用了kerbores认证，报了第一个错误 这是由于没有配置kerbores 2参考了网上的一块代码，连接带有认证的hbase的代码 System.setProperty(“java.security.krb5.conf”,“E:\learning\aaaa.keytab”); HiveConf conf...
JDK8 和 JDK17 下基于JDBC连接Kerberos认证的Hive(代码已测试通过)
mizuhokaga的博客
02-02 2327
打开了debug后,如果是正常情况,我们能观察到控制台会打印到krb5.conf相关内容信息,出现问题优先根据debug日志查看,如果没有打印出krb5文件内容,去看看路径/文件权限。之前自研平台是基于jdk8开发的,连接带Kerberos的hive也是jdk8,现在想升级jdk到17,发现过Kerberos的hive有点不一样,特地记录。写了sun.security.krb5.Config 包位于java8中的rt.jar,从java9之后rt.jar and tools.jar 了。
java.lang.ClassNotFoundException: com.atguigu.flume.interceptor.TimestampInterceptor$Builder
06-07
`java.lang.ClassNotFoundException` 是Java运行时环境遇到的一个常见异常，它表示在Java应用程序试图加载指定的类时，无法找到该类。在这个特定的错误信息中，`com.atguigu.flume.interceptor.TimestampInterceptor$Builder` 指的是 `TimestampInterceptor` 类中的内部构建器类。 `TimestampInterceptor` 可能是一个Flume（一个分布式、可靠、可扩展的事件收集系统）插件，用于添加时间戳到事件中。`Builder` 类可能是用来创建 `TimestampInterceptor` 实例的工厂类，通常在配置文件中通过全限定名引用。 这个异常可能的原因包括： 1. 类库或依赖没有正确包含或部署：确保项目中包含了包含 `TimestampInterceptor` 的jar包，并且路径设置正确。 2. 类路径（Classpath）问题：类无法找到可能是因为编译后的class文件不在类路径中。 3. 配置文件错误：检查Flume配置文件，看是否正确引用了这个类和构建器。 4. 版本冲突：如果使用了不同版本的Flume插件，可能会导致类加载问题。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

快乐骑行^_^

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值