【Flink】Flink No JAAS configuration section named Client ERROR:Authentication failed

已于 2023-07-19 16:42:33 修改
阅读量3.8k 收藏
点赞数 1
分类专栏： 大数据-flink 文章标签： flink 大数据
于 2020-08-26 20:57:15 首次发布
本文为博主九师兄（QQ:541711153 欢迎来探讨技术）原创文章，未经允许博主不允许转载。
本文链接：https://blog.csdn.net/qq_21383435/article/details/108247318
版权
大数据-flink 专栏收录该内容
838 篇文章 846 订阅 ¥99.90 ¥299.90
订阅专栏
在运行Flink时遇到一个错误，日志显示SASL配置失败，具体为JAAS配置文件中缺少名为'Client'的部分。尽管这个警告存在，但不影响程序运行。该问题涉及Flink、Zookeeper的身份验证，以及SASL和JAAS的配置。
摘要由CSDN通过智能技术生成

在这里插入图片描述

1.概述

在flink运行的时候，发现日志中有个错误如下，然后我去根据：【Kafka】Kafka 配置 SASL_SSL jks鉴权验证方式 中的设置，查看发现，没有想过的SASL设置，仔细的查找，确实没发现想过的设置，然后不晓得为啥报错如下，在这段代码中只是设置了监听zk节点变化罢了，zk也没有设置相关的设置，但是不影响程序运行。

2020-08-26 13:26:07 PM [Threa
了解本专栏 订阅专栏 解锁全文
九师兄
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论
专栏目录
订阅专栏
【Flink】Flink 写入 kafka 报错 Transactional Id authorization failed
九师兄
06-09 931
1.概述 FlinkKafkaProducer.Semantic.EXACTLY_ONCE时，有人见过这个报错吗？？ 重启过也没有用，一直都是这个报错，我看了yarn日志，如果设置checkpoint，是走事务的。未设置checkpoint，即使FlinkKafkaProducer.Semantic.EXACTLY_ONCE，也不是走事务的。 看起来是权限问题。 但是权限都有的 。用户读取和非事务写都是ok的，事务写就是异常 我怀疑是事务的topic没有权限，这个需要用上面的命令，改一下 topic查看
Flink（二）CentOS7.5搭建Flink1.6.1分布式集群
zzy7075的专栏
02-23 553
一.Flink的下载 安装包下载地址：http://flink.apache.org/downloads.html ，选择对应Hadoop的Flink版本下载 [admin@node21 software]$ wget http://mirrors.tuna.tsinghua.edu.cn/apache/flink/flink-1.6.1/flink-1.6.1-bin-hadoop27-scala_2.11.tgz [admin@node21 software]$ ll -rw-rw-r--..
flink集群启动taskmanager报错No JAAS configuration section named ‘Client was found in specified JAAS cgfile
lichao1618的博客
07-24 1421
flink集群启动taskmanager报错：No JAAS configuration section named 'Client' was found in specified JAAS configuration file：'/data/flink-1.15.4/tmp/jaas-8541466299643767547.conf'. Will continue connection to Zookeeper server without SASL authentication
【Kafka】Kafka生产者开启幂等性后报错：Cluster authorization failed.
最新发布
浩瀚宇宙的一粒尘埃
07-03 989
1. 用户业务需求，需要开启生产者的幂等性，生产者加了配置：enable.idempotence = true 2. 用户使用的集群开启了ACL认证：SASL_PLAINTEXT/SCRAM-SHA-512 3. 用户生产消息时报错：org.apache.kafka.common.errors.ClusterAuthorizationException: Cluster authorization failed.
基于cdh的flink程序7天认证失效
MyNameIsWangYi的博客
11-17 1505
集群开着kerberos认证的，如果开启着checkpoint，我们的State backend用的是hdfs，七天以后token会失效，到时候报错token失效，checkpoint是提交不到hdfs上的 提交参数的时候设置一下： nohup flink run -yD security.kerberos.login.principal=<****> -yD security.kerberos.login.keytab=<keytab路径> -d -m yarn-cluster -
authentication failure解决办法
热门推荐
qq_41663800的博客
06-24 1万+
1.在命令行下敲：sudo passwd root 2.输入原来的密码 3.输入新密码 4.确认新密码
springkafka集成后给kafka集群发送失败（cluster authorization failed）
weixin_41645232的博客
09-16 2832
1、kafka集群使用的是SASL/SCRAM-SHA-256认证 sasl-mechanism: SCRAM-SHA-256 security-protocol: SASL_PLAINTEXT sasl-jaas-config: org.apache.kafka.common.security.scram.ScramLoginModule required username="admin" password="Wisebrain@20210621"; 解决方案： https://stackoverflo
Flink1.9“Error: A JNI error has occurred”
01-07
最近公司要搭建大数据系统，架构师推荐使用flink来搭建这套系统。所以我这边这天在自己的虚拟机环境（Ubuntu16.4）下调研玩一下Flink。 从ververica上学习了一下flink的基础知识，因为之前是做python数据处理分析的...
大数据技术原理及应用课实验8 ：Flink初级编程实践
01-16
在本实验"大数据技术原理及应用课实验8：Flink初级编程实践"中，主要目标是熟悉Flink编程基础和使用IntelliJ IDEA工具来构建Flink程序。实验环境包括Ubuntu 18.04或16.04操作系统，IntelliJ IDEA作为开发工具，以及...
FlinkSQL实战：HBase的结合应用
02-23
而当下FlinkSQL的火热程度不用多说，FlinkSQL也为HBase提供了connector，因此HBase与FlinkSQL的结合非常有必要实践实践。当然，本文假设用户有一定的HBase知识基础，不会详细去介绍HBase的架构和原理，本文着重介绍...
flink-sql-submit-client:执行Flink SQL 文件的客户端
05-29
flink-sql-submit-client 执行Flink SQL 文件的客户端 Flink 版本：flink 1.11.0 其他版本待测试 是在的基础上修改而来 使用简单方便 需要指定FLINK_HOME 下载上面code中的jar包 修改 sql-submit.sh 脚本中jar包的...
Flink完美搭档：数据存储层上的Pravega
02-02
本文将从大数据架构变迁历史，Pravega简介，Pravega进阶特性以及车联网使用场景这四个方面介绍Pravega，重点介绍DellEMC为何要研发Pravega，Pravega解决了大数据处理平台的哪些痛点以及与Flink结合会碰撞出怎样的...
当TiDB与Flink相结合：高效、易用的实时数仓
02-23
随着互联网飞速发展，企业业务种类会越来越多，业务数据量会越来越大，当发展到一定规模时，传统的数据存储结构逐渐无法满足企业需求，实时数据仓库...而得益于新版Flink对SQL的支持，以及TiDBHTAP的特性，我们探索了一
当 TiDB 与 Flink 相结合：高效、易用的实时数仓
01-26
随着互联网飞速发展，企业业务种类会越来越多，业务数据量会越来越大，当发展到一定规模时，传统的数据存储结构逐渐无法满足企业需求，实时数据仓库就变成了一个必要的基础服务。以维表 Join 为例，数据在业务...
【记录】flink更换版本之后启动报错
遇事不决问春风
06-28 1115
flink启动[ERROR - main-EventThread] (ConnectionState.java:307) Authentication failed 解决方案 删除zookeeper中的flink目录下所有东西
CDH6集成Kerberos
wangkuangood3200的专栏
09-12 2086
一、概述 本文是针对cloudera大数据集群安全部署整理的文档，主要介绍了大数据集群Kerberos服务器部署和集成的过程。 这篇文章介绍了kerberos配置高可用HA的过程：Kerberos高可用HA配置 二、环境说明 1、主机名 主机名首字母必须为小写，否则在集成kerberos时会出现很多异常问题。 2、hosts文件 /etc/hosts文件中不要包含127.0.0.1的...
zookeeper异常排查
u012131610的博客
02-13 2840
 java.nex.ConnectException:Connection refused     at sun.nio.ch.SocketChannelImpl.checkConnect(Native Method)     at sun.nio.ch.SocketChannelImpl.finishConnect(SocketChannelImpl.java:731)     at org.a...
【Flink】Flink跨集群访问开启Kerberos认证的Kafka
九师兄
07-30 2798
Flink提供了三个模块来对集群进行安全验证，分别是HadoopModule、JaasModule、ZooKeeperModule。安全认证相关参数对应的类SecurityOptions。HadoopModule用来对使用UserGroupInformation进行身份验证的框架（kudu、hbase同步框架、hdfs等）进行认证配置。JaasModule用来对使用JaasConfig进行身份验证的框架（kafka、zk、hbase异步框架等）进行认证配置。......
flink Configuration
11-29
Flink Configuration是指Flink的配置文件，用于控制Flink在运行时的行为。配置文件是全局配置，因此更改配置文件需要重新启动Flink相关的进程。可以通过在flink-conf.yaml中配置选项来定义集群的默认重启策略。以下是一个flink-conf.yaml的例子： ```yaml # Flink JobManager configuration jobmanager.rpc.address: localhost jobmanager.rpc.port: 6123 # Flink TaskManager configuration taskmanager.numberOfTaskSlots: 4 taskmanager.memory.process.size: 1600m taskmanager.memory.task.heap.size: 1024m # High Availability configuration high-availability: zookeeper high-availability.zookeeper.quorum: localhost:2181 high-availability.zookeeper.path.root: /flink ``` 在上面的例子中，我们可以看到一些常见的配置选项，例如JobManager和TaskManager的配置，以及高可用性配置。可以根据需要添加或修改配置选项来满足特定的需求。
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

九师兄

你的鼓励是我做大写作的动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值