![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
kafka
文章平均质量分 82
芒果无忧
这个人很懒,不想添加简介
展开
-
SpringBoot整合ES高级查询
SpringBoot整合ES高级查询springboot版本:2.0.5.RELEASEelasticsearch版本:7.9.11、配置引入依赖:<dependency> <groupId>org.elasticsearch.client</groupId> <artifactId>elasticsearch-rest-high-level-client</artifactId> <version>7原创 2021-11-26 15:07:21 · 8585 阅读 · 2 评论 -
Kafka Rebalance测试
Kafka Rebalance测试关于kafka的Rebalance机制,其实就是规定同一个consumer group下所有的consumer如何协调工作的,分配订阅Topic分区的。Rebalance发生时,Group 下所有 consumer 实例都会协调在一起共同参与,kafka 能够保证尽量达到最公平的分配。但是 Rebalance 过程对 consumer group 会造成比较严重的影响。在 Rebalance 的过程中 consumer group 下的所有消费者实例都会停止工作,等待原创 2021-11-23 18:45:25 · 1156 阅读 · 0 评论 -
Kafka消费者订阅方式
Kafka消费者订阅方式1、指定主题消费2、指定分区消费3、取消订阅4、总结Kafka为消费者提供了三种类型的订阅消费方式:订阅主题集合、正则表达式订阅主题、订阅指定主题的分区集合。三种方式只能使用其中一种。1、指定主题消费一个消费者可以使用KafkaConsumer提供的subscribe()方法订阅一个或多个主题,订阅主题集合和正则表达式订阅主题都使用此方法实现的。下面两种方式都可以订阅topic_1120主题。KafkaConsumer<String, String> consum原创 2021-11-23 16:13:05 · 7625 阅读 · 0 评论 -
Kafka生产者_消费者实战
Kafka生产者_消费者实战1 生产者2 消费者1 生产者import ch.qos.logback.classic.Level;import ch.qos.logback.classic.Logger;import ch.qos.logback.classic.LoggerContext;import org.apache.kafka.clients.CommonClientConfigs;import org.apache.kafka.clients.admin.ScramMechanism原创 2021-11-20 17:02:05 · 731 阅读 · 0 评论 -
Java版 Kafka ACL使用实战
Java版 Kafka ACL使用实战原创 2021-11-18 18:44:45 · 2695 阅读 · 1 评论 -
Kafka Tool工具使用
Kafka Tool工具使用今天介绍一款连接kafka的小工具,可以查看集群信息、topic信息、消费者群组等信息,非常方便。资源下载:Kafka Tool 2.0.8资源我这边kafka环境都采用了SASL方式认证,这里主要介绍下这种模式下工具的配置。kafka的安全认证可以参考我这遍文档:Kafka安全认证配置工具安装好后,打开settings设置下topic的消息格式,这里选择String然后添加集群信息,这里kafka版本感觉默认就行(不选也没报错),填写Zookeeper的地址和端口原创 2021-11-18 16:52:33 · 2916 阅读 · 0 评论 -
Kafka安全认证授权配置
Kafka安全认证授权配置一 概述1.1 Kafka的权限分类1.2 实现方式二 安全认证授权配置2.1 zookeeper配置2.1.1 引入kafka依赖包2.1.2修改ZK配置文件2.1.3 创建jaas文件2.1.4 修改zkEnv.sh2.1.5 启动zk2.2 Kafka配置2.2.1 创建超级用户2.2.2 创建jaas文件2.2.3 修改kafka配置文件2.2.4启动kafka三 测试连接3.1 生产者测试3.2 消费者测试3.3 beats工具连接3.4 logstash消费一 概述原创 2021-11-17 16:02:30 · 7894 阅读 · 2 评论