kafka
文章平均质量分 84
小王是个弟弟
个人博客 https://uhope.fun
展开
-
当参数调优无法解决kafka消息积压时可以这么做
如何快速处理kafka的消息积压原创 2023-03-01 18:50:52 · 717 阅读 · 0 评论 -
kafka producer 源码解析
从未有过如此详细的kafka源码解析-生产者篇原创 2022-07-14 19:10:30 · 1491 阅读 · 0 评论 -
Java NIO 有着一篇足够入门
万字图文,一篇带你入门 NIO,绝对精彩,干货满满原创 2022-06-26 17:34:08 · 356 阅读 · 0 评论 -
拓展kafka功能:删除指定时间之前的数据
拓展kafka删除功能 by timestamp原创 2022-06-19 12:23:50 · 2030 阅读 · 0 评论 -
实现 kafka 消费者的动态订阅
在消费者线程不安全的前提下实现多线程动态增减消费者的订阅原创 2022-04-17 14:17:24 · 4087 阅读 · 1 评论 -
手写 kafka 异步回调
教你实现一个简单的 kafka 异步回调功能原创 2022-04-17 14:15:26 · 2884 阅读 · 1 评论 -
记一次kafka线上事故
kafka无限重复消费,导致数据严重积压原创 2022-04-17 14:11:43 · 2505 阅读 · 1 评论 -
Kafka 安全认证及权限控制
作者:wjun平台:MacOS版本:Kafka 2.4.1 、Zookeeper 3.6.2一、Zookeeper 配置 SASL若只关注 kafka 的安全认证,不需要配置 Zookeeper 的 SASL,但 kafka 会在 zk 中存储一些必要的信息,因此 zk 的安全认证也会影响到 kafka ????????????1.1 新建 zoo_jaas.conf 文件zoo_jaas.conf文件名、文件所在路径没有特殊要求,一般放置在${ZOOKEEPER_HOME}/conf目录下原创 2021-07-20 18:12:20 · 10072 阅读 · 2 评论 -
Kafka 核心原理(贼全面)
一、Kafka 概述1.1 定义 Kafka是一个分布式的基于发布/订阅模式的消息队列(Message Queue),主要应用于大数据实时处理领域,处于大数据数据传输层,属于消息中间件。如AB两个系统需要通信,但并不是直连中间通过消息中间件,还可以实现解耦。1.2 消息队列1.2.1 传统消息队列的应用场景(1)同步处理 整个线程串行,并不高效(2)异步处理 请求数据写入MQ,并返回响应结果,可以做到解耦,等系统上线时去MQ取数据;还可以缓解服务端的压力(削峰)(3)使用消息队列原创 2020-08-03 21:38:01 · 1132 阅读 · 0 评论