kafka
Oo。°ºO
这个作者很懒,什么都没留下…
展开
-
Kafka及Spring&Kafka整合
由于某项目的消息队列使用了Spring整合Kafka,开发中我需要使用kafka客户端模拟生产者和消费者。简单了解了一下Kafka,扫盲贴,先标记一下,日后再深入学习。 一、Kafka简介1.1 简介 kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据。这种动作(网页浏览,搜索和其他用户的行动)是在现代网络上的许多社会功能的一个...原创 2018-09-13 18:52:07 · 5275 阅读 · 1 评论 -
kafka动态配置topic
之前使用@org.springframework.kafka.annotation.KafkaListener这个注解的时候,是在yml文件中配置,然后使用@KafkaListener(topics = {"${kafka.topic.a2b.name}"}),这样去单独监听某一个topic,生产者也固定在代码里定义变量读取配置文件。昨天改了个需求,希望以后通过配置文件去动态配置生产者和消费者的...原创 2019-01-11 14:18:43 · 17122 阅读 · 14 评论 -
kafka一个服务配置到不同topic的不同group
标题比较长,实在想不出什么好的描述。大概要解决的问题就是,同一个服务同时监听多个topic,且在每个topic中的group都不相同,具体看问题描述吧。一、问题背景 前几天部署了一套系统,每个服务都搭建了多个节点,而且是没有主从关系的节点。每个服务中有很多东西是放到缓存中的,配置多节点之后,相同服务的不同节点出现了缓存不一致的问题。二、问题描述 刚开始想出一种解决方案,监听同一个top...原创 2019-02-28 15:50:34 · 6440 阅读 · 0 评论