![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
KAFKA
大小鱼鱼鱼与鱼.
太阳当空照,花儿对我笑。
展开
-
kafka常用命令
kafka版本:0.8.2.0,本人亲测可用。#创建topicbin/kafka-topics.sh --create --topic pinpoint-sql --replication-factor 1 --partitions 3 --zookeeper 127.0.0.1:2181#指定分组下启动消费者./kafka-console-consumer.sh --zookeeper ...原创 2019-02-15 20:07:30 · 195 阅读 · 0 评论 -
kafka线程池消费
阅读官网文档很有必要http://kafka.apache.org/documentation.html分区、Offset、消费线程、group.id的关系一组(类)消息通常由某个topic来归类,我们可以把这组消息“分发”给若干个分区(partition),每个分区的消息各不相同;每个分区都维护着他自己的偏移量(Offset),记录着该分区的消息此时被消费的位置;一个消费线程可以对应...原创 2019-02-15 21:49:51 · 3049 阅读 · 0 评论 -
SpringBoot学习:kafka批量并发消费配置(consumer+producer)
springboot使用的是2.0.0版本,spring-kafka使用的是2.1.4版本,配置的时候遇到了一些问题,在此总结一下:1. session-timeout连接超时时间,之前 配置的是3000(ms),一直报异常,堆栈信息提示 连接超时时间不能大于“某时间”,这里一直没弄懂“某时间”是指哪个时间。ps:忘记“ ”里的时间是什么了,可能是我英语太差的原因。2. 是否开启自动提交...原创 2019-03-08 00:20:05 · 45062 阅读 · 32 评论 -
Kafka:安全认证SASL
kafka安装部署省略…首先需要在config目录下新建文件kafka_server_jaas.conf,配置如下KafkaServer { org.apache.kafka.common.security.plain.PlainLoginModule required username="admin" password="admin" user_admin...原创 2019-06-04 20:53:19 · 1170 阅读 · 0 评论