带有Kerberos认证的Kafka
对topic的增删查,生产者消费者的命令
1.需要刷新为Kafka用户进行Kerberos认证
cd /etc/security/keytabs/
[root@bigdata-hadoop-data--1 keytabs]# klist -kt kafka.service.keytab
Keytab name: FILE:kafka.service.keytab
KVNO Timestamp Principal
---- ------------------- ------------------------------------------------------
1 07/01/2020 10:39:27 kafka/bigdata-hadoop-data--1.novalocal@DEV.COM
1 07/01/2020 10:39:27 kafka/bigdata-hadoop-data--1.novalocal@DEV.COM
1 07/01/2020 10:39:27 kafka/bigdata-hadoop-data--1.novalocal@DEV.COM
1 07/01/2020 10:39:27 kafka/bigdata-hadoop-data--1.novalocal@DEV.COM
1 07/01/2020 10:39:27 kafka/bigdata-hadoop-data--1.novalocal@DEV.COM
kinit -kt kafka.service.keytab kafka/bigdata-hadoop-data--1.novalocal
2.创建topic
bin/kafka-topics.sh --zookeeper bigdata-hadoop-data--1.novalocal:2181 --create --topic second --replication-factor 1 --partitions 3
这里的bigdata-hadoop-data--1.novalocal:2181
以实际为准
--create
创建参数,删除改为--delete
即可
--topic
定义topic名
--replication-factor
定义副本数
--partitions
定义分区数
3.查看topic的详情
bin/kafka-topics.sh --zookeeper bigdata-hadoop-data--1.novalocal:2181 --describe --topic second
--describe
定义描述的参数
4.acl授权
bin/kafka-acls.sh --authorizer-properties zookeeper.connect=bigdata-hadoop-data--1.novalocal:2181/kafka2 --add --allow-principal User:ffcs_bigdata --producer --topic second
先进行5、6如果能够成功这步就不需要了
5.生产者生产消息
bin/kafka-console-producer.sh --broker-list bigdata-hadoop-data--1.novalocal:6667 --topic second --security-protocol PLAINTEXTSASL --producer-property sasl.mechanism=GSSAPI
6.消费者消费消息
bin/kafka-console-consumer.sh --bootstrap-server bigdata-hadoop-data--1.novalocal:6667 --from-beginning --topic second --security-protocol PLAINTEXTSASL
我在测试生产消费过程中,一直报这个错
提示我没有操作second
这个topic的权限
解决方法:就是第一步+第三步,如果第一步执行完,能够执行生产消费过程,就不需要执行第三步
我没有操作second
这个topic的权限
解决方法:就是第一步+第三步,如果第一步执行完,能够执行生产消费过程,就不需要执行第三步