rdkafka c++ 报错整理， 含kafka 配置Kerberos后使用

已于 2022-03-18 17:58:10 修改
阅读量4.3k 收藏
点赞数
分类专栏： kafka 文章标签： kafka 分布式
于 2022-03-16 10:00:23 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/huofire001/article/details/123519093
版权
在使用rdkafka C++时遇到SASL GSSAPI机制缺失的问题，需重新编译librdkafka以支持SASL和Kerberos。配置Kerberos后，producer需设置`bootstrap.servers`，确保hostname在Kerberos数据库中存在。其他关键配置包括`sasl.kerberos.service.name`、`sasl.kerberos.keytab`、`security.protocol`等，保持与Kerberos设置一致。
摘要由CSDN通过智能技术生成

报错信息：No provider for SASL mechanism GSSAPI: recompile librdkafka with libsasl2 or openssl support. Current build options: PLAIN SASL_SCRAM OAUTHBEARER

解决方案：需要配置编译选项：

Debian/Ubuntu:

sudo apt-get install libsasl2-modules-gssapi-mit libsasl2-dev

CentOS/Redhat:

sudo yum install cyrus-sasl-gssapi cyrus-sasl-devel

参考链接：https://github.com/edenhill/librdkafka/wiki/Using-SASL-with-librdkafkahttps://github.com/edenhill/librdkafka/wiki/Using-SASL-with-librdkafka kerberos:

     server端配置

最低0.47元/天 解锁文章
huofire001
关注
专栏目录
c++使用librdkafka kerberos认证
chengfang0911的专栏
09-02 2186
sasl.kerberos.kinit.cmd命令不用加，文档上面写的是默认执行：kinit -R -t "%{sasl.kerberos.keytab}" -k %{sasl.kerberos.principal} || kinit -t "%{sasl.kerberos.keytab}" -k %{sasl.kerberos.principal}把krb5.conf拷贝到/etc/目录替换到原来的krb5.conf文件。设置环境变量 KRB5_CONFIG=/***/krb5.conf。
0500-使用Python2访问Kerberos环境下的Kafka
Hadoop_SC的博客
12-30 442
1文档编写目的 Kafka支持多种客户端语言（C/C++、Go、Java、JMS、.NET、Python）。Fayson在前面多篇文章介绍了Java访问Kerberos和非Kerberos环境下的Kafka，参考《如何使用Java连接Kerberos的Kafka》。本篇文章Fayson主要介绍使用Python2访问Kerberos环境下的Kafka。在学习本篇文章内容前你还需要知道《如何通过Clo...
高性能Kafka客户端：node-rdkafka
最新发布
gitblog_00021的博客
09-07 313
高性能Kafka客户端：node-rdkafka node-rdkafkaNode.js bindings for librdkafka项目地址:https://gitcode.com/gh_mirrors/no/node-rdkafka 项目介绍 node-rdkafka 是一个高性能的 Node.js 客户端，专为 Apache Kafka 设计。它通过封装原生的 librdkafka 库，...
Kafka 1.1.1版本利用SASL/Kerberos进行身份认证
ShanQuanQiang的专栏
01-16 6087
  准备工作 配置kdc 配置kafka brokers 配置zookeeper 配置kafka客户端 常见问题 1.准备工作 系统环境：Centos 7 在Kerberos的部署过程中，要求使用FQDN,即Hostname.DomainName。 hostname的查看命令： hostname domainname的查看命令：d...
windows系统进行Kerberos认证并配置浏览器访问（MIT Kerberos Ticket Manager ）
IUNIQUE技术册
09-16 5228
Windows kerbores认证目录下载MIT安装包修改krb5.ini配置用户名和密码认证测试4.keytab认证测试 目录 介绍windows如何使用用户名和密码进行kerbores认证 下载MIT安装包 链接：https://pan.baidu.com/s/1C8wisL0fMR2dMnyxMeb2Dg 提取码：bwnx 修改krb5.ini配置 配置文件默认路径：C:\ProgramData\MIT\Kerberos5（注意可能是隐藏文件哦） 下面是我的配置信息，其实就是把kerbores里面的
Windows下编译的librdkafkacpp库,包含openssl等
05-15
使用vs2017在windows10下编译生成的库文件有c和c++两个版本,可以在vc++和qt使用
单机 kafka 配置 kerberos，设置 ACL 权限
10-10
kafka 配置 kerberos，设置 ACL权限， java 客户端连接。
kafka 配置kerberos安全认证
01-28
### Kafka配置Kerberos安全认证详解 #### 一、引言 Kafka 是一款高性能的消息队列服务，广泛应用于大数据处理领域。为了保障数据的安全性和完整性，Kafka 提供了多种安全认证机制，其中 Kerberos 认证是一种非常...
RdKafka::KafkaConsumer使用实例
08-11
在本文中，我们将深入探讨如何使用C++库RdKafka中的`KafkaConsumer`类来消费Apache Kafka消息。RdKafka是一个高效的C/C++ Kafka客户端，它提供了生产者和消费者API，使得与Kafka集群进行交互变得更加简单。在这个...
Python confluent kafka客户端配置kerberos认证流程详解
01-19
其中第一种SASL/GSSAPI的认证就是kerberos认证，对于java来说有原生的支持，但是对于python来说配置稍微麻烦一些，下面说一下具体的配置过程，confluent kafka模块底层依赖于librdkafka，这是使用c编写的高性能的...
kafka使用笔记-librdkafka支持sasl认证
知识就是生产力
12-07 6389
由于业务需要，需要在librdkafka开源库的基础上增加SASL认证。由于相关的资料比较少，特此记录，以便后用。本此librdkafka的使用时在windows平台，。 一、版本和准备工作 1、librdkafka 由于之前一直使用的是librdkafka0.9版本，编译之后死活认证失败，最后拉取最新版本，测试可用。点击此处 下载最新librdkafka源码 2、openssl 由于librdk...
kafka使用笔记-librdkafka支持sasl认证-附件资源
03-02
kafka使用笔记-librdkafka支持sasl认证-附件资源
kafka实战kerberos（笔记
qq_44912603的博客
12-23 537
环境 版本：kafka_2.12-2.3.0 主机名：orchome LSB Version: :core-4.1-amd64:core-4.1-noarch Distributor ID: CentOS Description: CentOS Linux release 7.5.1804 (Core) Release: 7.5.1804 Codename: Core Linux version 3.10.0-862.el7.x86_64 (builder@kbuilder.dev.centos.org)
kafka-3-故障排错
qq_43058317的博客
10-12 1451
文章目录前言1.22 Kafka常见故障排错1）UnknownTopicOrPartitionException2）LEADER_NOT_AVAILABLE3）NotLeaderForPartitionException4）TimeoutException5）RecordTooLargeException6）Closing socket connection7）ConcurrentModificationException8）NetWorkException [kafka-producer-networ.
连接kafka时出现ImportError:librdkafka.so
Lubin的编程专栏
12-20 1139
明明已经编译安装完了 librdkafka git clone https://github.com/edenhill/librdkafka.git 但是有问题 重新调用下ldconfig命令即可 ldconfig
使confluent_kafka支持SASL_PLAINTEXT
FaN()
03-08 3885
文章目录安装confluent-kafka安装librdkafka替换库文件验证 同事之前一直使用kafka-python开发. 上了ACL以后发现kafka-python居然不支持SASL_PLAINTEXT https://kafka-python.readthedocs.io/en/master/apidoc/KafkaProducer.html sasl_mechanism (str) ...
librdkafka的安装和使用
热门推荐
ljp1919的专栏
06-24 4万+
安装：下载https://github.com/edenhill/librdkafka 预备环境：The GNU toolchain GNU make pthreads zlib (optional, for gzip compression support) libssl-dev (optional, for SSL and SASL SCRAM support) libsasl2-dev (
基于ngx_kafka_module插件做日志收集（git安装）
老三学加瓦
08-25 277
文章目录安装git安装kafka的c客户端安装nginx整合kafka的插件nginx配置文件重启nginx测试 安装git [root@10 nginx]# yum install -y git ... 作为依赖被安装: perl-Error.noarch 1:0.17020-2.el7 perl-Git.noarch 0:1.8.3.1-23.el7_8
Kafka踩坑记----bootstrap-server is not a recognized option如何解决
mono的博客
11-23 2万+
问题背景： 最近在做一个数据实时处理的项目，其中用到了Kafka，之前有过了解，但用起来还是不熟悉。 如题这个错误，是在做将网站日志发送到Kafka主题中时，项目使用的是Springboot集成的Kafka，当时关于Springboot中Kafka的部分已经完成，zookeeper和kafka已经正常启动，然后在查看当前Kafka中当前主题时出现错误，具体如下： 是在输入命令bin/kafka-topics.sh --bootstrap-sever hadoop102:9092 --list后出现 问题分
Kafka单机配置Kerberos与ACL权限指南
"配置Kafka以使用Kerberos进行安全认证，并设置ACL权限，确保Java客户端能够安全连接" 在分布式系统中，安全性是非常关键的一环。Apache Kafka作为实时流处理平台，为了保障数据的安全传输和访问控制，可以采用...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值