
Kafka
文章平均质量分 66
小丁学Java
这个作者很懒,什么都没留下…
展开
-
maxwell 输出消息到 kafka
kafka-producer:https://maxwells-daemon.io/config/#kafka-producer3、进入kafka容器内部4、tingshu_album 数据库中 新增数据5、tingshu_album 数据库中 更新数据6、tingshu_album 数据库中 删除数据7、总结原创 2024-09-19 19:17:15 · 924 阅读 · 0 评论 -
使用kafka完成数据的实时同步,同步到es中。(使用kafka实现自动上下架 upper、lower)
公开的同步公开的同步私有的删除。原创 2024-08-28 10:16:21 · 1639 阅读 · 0 评论 -
使用kafka改造分布式事务
使用kafka改造分布式事务。原创 2024-08-22 19:51:41 · 866 阅读 · 0 评论 -
kafka生产者发送模式有哪几种?(发后即忘、同步发送、异步发送)
Kafka生产者的三种发送模式各有优劣,选择哪种模式取决于具体的应用场景和需求。如果需要极低的延迟和简单的代码实现,可以选择发后即忘模式;如果需要确保每条消息都被可靠地写入Kafka,并且能够处理错误,可以选择同步发送模式;如果需要兼顾低延迟、高吞吐量和可靠性,可以选择异步发送模式。原创 2024-08-22 18:46:37 · 1085 阅读 · 0 评论 -
在docker中,安装zookeeper、kafka
在docker中,安装zookeeper、kafka。原创 2024-08-01 17:49:43 · 583 阅读 · 0 评论 -
kafka-重试和死信主题(SpringBoot整合Kafka)
在Kafka中,DLT通常指的是 。Dead Letter Topic(DLT)的定义与功能:DLT的使用与意义:总之,在Kafka中,DLT是一个用于处理无法被成功消费的消息的特殊Topic,它提供了一种灵活且可靠的机制来保障Kafka系统的稳定性和可靠性。3.2、引入spring-kafka依赖3.3、创建SpringBoot启动类3.4、创建生产者发送消息3.5、创建消费者消费消息原创 2024-06-07 16:11:16 · 2322 阅读 · 0 评论 -
If the serialization is only done by a trusted source, you can also enable trust all (*).解决方法
If the serialization is only done by a trusted source, you can also enable trust all (*).解决方法。原创 2024-06-06 20:48:44 · 720 阅读 · 0 评论 -
kafka-消费者-消费对象消息(了解)(SpringBoot整合Kafka)
kafka-消费者-消费对象消息(了解)(SpringBoot整合Kafka)原创 2024-06-06 20:34:43 · 990 阅读 · 0 评论 -
kafka-生产者-发送对象消息(SpringBoot整合Kafka)
kafka-生产者-发送对象消息(SpringBoot整合Kafka)原创 2024-06-06 20:02:02 · 520 阅读 · 0 评论 -
kafka-消费者-消费异常处理(SpringBoot整合Kafka)
kafka-消费者-消费异常处理。原创 2024-06-06 19:28:20 · 2026 阅读 · 0 评论 -
kafka-消费者-设置 ack-mode: manual_immediate和acknowledgment.acknowledge()避免重复消费(SpringBoot整合Kafka)
kafka-消费者-设置 ack-mode: manual_immediate和acknowledgment.acknowledge()避免重复消费。原创 2024-06-06 18:05:56 · 2412 阅读 · 0 评论 -
kafka-消费者-设置 ack-mode: manual_immediate 会导致消息重复消费(SpringBoot整合Kafka)
kafka-消费者-设置 ack-mode: manual_immediate 会导致消息重复消费。原创 2024-06-06 17:42:24 · 1338 阅读 · 0 评论 -
kafka-消费者-指定offset消费(SpringBoot整合Kafka)
kafka-消费者-指定offset消费(SpringBoot整合Kafka)原创 2024-06-06 16:04:46 · 1906 阅读 · 0 评论 -
kafka-消费者-指定分区消费(SpringBoot整合Kafka)
kafka-消费者-指定分区消费(SpringBoot整合Kafka)原创 2024-06-06 15:35:55 · 1492 阅读 · 0 评论 -
kafka-消费者-注解接收消息(SpringBoot整合Kafka)
kafka-消费者-注解接收消息(SpringBoot整合Kafka)原创 2024-06-06 11:58:35 · 717 阅读 · 0 评论 -
kafka-消费者组(SpringBoot整合Kafka)
kafka-消费者组。原创 2024-06-06 11:36:21 · 1582 阅读 · 0 评论 -
kafka-消费者服务搭建&配置&简单消费(SpringBoot整合Kafka)
kafka-消费者服务搭建&配置(SpringBoot整合Kafka)原创 2024-06-05 21:06:02 · 3437 阅读 · 0 评论 -
kafka-生产者事务-数据传递语义&事务介绍&事务消息发送(SpringBoot整合Kafka)
kafka-生产者事务-数据传递语义&事务介绍&事务消息发送。原创 2024-06-05 16:11:49 · 983 阅读 · 0 评论 -
kafka-生产者监听器(SpringBoot整合Kafka)
kafka-生产者监听器(SpringBoot整合Kafka)原创 2024-06-04 19:41:16 · 1346 阅读 · 2 评论 -
kafka-生产者拦截器(SpringBoot整合Kafka)
kafka-生产者拦截器(SpringBoot整合Kafka)原创 2024-06-04 16:55:46 · 1390 阅读 · 1 评论 -
spring-kafka-生产者服务搭建&测试(SpringBoot整合Kafka)
spring-kafka-生产者服务搭建&测试(SpringBoot整合Kafka)原创 2024-06-04 14:59:04 · 904 阅读 · 2 评论 -
kafka-集群-生产消费测试
kafka-集群-生产消费测试。原创 2024-06-04 14:09:59 · 505 阅读 · 0 评论 -
kafka-集群-主题创建
kafka-集群-主题创建。原创 2024-06-03 20:21:41 · 522 阅读 · 0 评论 -
kafka-集群搭建(在docker中搭建)
kafka-集群搭建(在docker中搭建)原创 2024-06-03 19:29:05 · 1026 阅读 · 0 评论 -
Kafka原生API使用Java代码-消费者组-消费模式
Kafka原生API使用Java代码-消费者组-消费模式。原创 2024-06-01 15:57:42 · 1112 阅读 · 0 评论 -
Kafka原生API使用Java代码-消费者-消费消息
Kafka原生API使用Java代码-消费者-消费消息1.3、生产者发送消息1.3.1、第一次发送消息原创 2024-05-30 18:07:03 · 480 阅读 · 0 评论 -
Kafka原生API使用Java代码-生产者-分区策略-指定key&分区号分区
Kafka原生API使用Java代码-生产者-分区策略-指定key&分区号分区。原创 2024-05-30 14:39:31 · 544 阅读 · 0 评论 -
Kafka原生API使用Java代码-生产者-分区策略-自定义分区器
import org//s 表示主题 //o 和 bytes 表示发送消息的 key //o1 表示发送的消息 @Override public int partition(String s , Object o , byte [ ] bytes , Object o1 , byte [ ] bytes1 , Cluster cluster) {if(o1 . toString() . contains("小明")) {return 1;原创 2024-05-30 11:21:38 · 541 阅读 · 0 评论 -
Kafka原生API使用Java代码-生产者-分区策略-默认分区策略&轮询分区策略
如果linger.ms 大于 0,并且当前批次中的消息数量尚未达到 batch.size 的限制,那么 Producer 会等待 linger.ms 指定的时间,看看是否还有更多的消息要发送到相同的分区。在 Kafka 的 Producer 配置中,linger.ms 参数用于控制 Producer 在发送消息之前等待更多消息到达相同分区(partition)的时间,以便可以将这些消息一起发送,从而提高吞吐量。需要注意的是,linger.ms 参数的值应该根据具体的业务场景和性能需求进行调整。原创 2024-05-29 20:40:58 · 831 阅读 · 0 评论 -
Kafka原生API使用Java代码-生产者-同步发送消息
Kafka原生API使用Java代码-生产者-同步发送消息。原创 2024-05-29 18:21:44 · 420 阅读 · 0 评论 -
Kafka原生API使用Java代码-生产者-异步发送消息&回调
Kafka原生API使用Java代码-生产者-异步发送消息&回调。原创 2024-05-29 18:08:45 · 694 阅读 · 0 评论 -
Kafka原生API使用Java代码-生产者-发送消息-发后即忘(Fire-and-Forget)
Kafka原生API使用Java代码-生产者-发送消息。原创 2024-05-29 17:09:10 · 789 阅读 · 0 评论 -
kafka-回顾图解(producer、broker、consumer、consumergroup、topic、partition、replicas、offset)
kafka-回顾图解(producer、broker、consumer、consumergroup、topic、partition、replicas、offset)原创 2024-05-29 15:48:22 · 169 阅读 · 0 评论 -
kafka-消费者组偏移量重置
kafka-消费者组偏移量重置原创 2024-05-28 20:30:50 · 3848 阅读 · 0 评论 -
kafka-偏移量图解
kafka-偏移量图解原创 2024-05-28 19:30:40 · 598 阅读 · 0 评论 -
kafka-消费者组-发布订阅测试
kafka-消费者组-发布订阅测试。原创 2024-05-28 19:02:23 · 960 阅读 · 0 评论 -
kafka-消费者组-点对点测试
kafka-消费者组-点对点测试。原创 2024-05-28 16:27:59 · 854 阅读 · 0 评论 -
kafka-消费模式图解(点对点、发布订阅模式)
点对点、发布订阅模式原创 2024-05-28 11:37:13 · 238 阅读 · 0 评论 -
kafka-生产者发送消息&消费者消费消息
kafka-生产者发送消息&消费者消费消息。原创 2024-05-28 11:12:42 · 683 阅读 · 0 评论 -
kafka-主题创建(主题操作的命令)
一个分区可以有多个副本(replicas:负责接收数据的分区副本为leader,其他的为follower)副本数量不能超过broker数量。一个topic可能拆分成多个分区(partition)kafka发送消息会存到主题中。消费者会从主题中获取消息消费。原创 2024-05-28 10:49:31 · 1349 阅读 · 0 评论