- 博客(2)
- 收藏
- 关注
原创 阿里云单服务器kafka伪集群搭建
下载并解压kafka (前提是安装并配置好jdk环境变量,原因是kafka依赖于zookeeper,而zookeeper使用java编写,kafka使用scala编写都需要JVM运行环境) kafka下载地址:http://kafka.apache.org/downloads zookeeper下载地址:https://zookeeper.apache.org/releases.html 注:自己是存放在/usr/local目录下 使用自带的简版zookeeper搭建zookeeper集群 (也可使用自
2020-12-11 23:14:47 1618 2
原创 kafka核心内容讲解
存储策略 每个topic有多个分区组成,而每个分区由多个segmet组成,每个segment由.log文件和.index文件组成 index文件主要保存消息的偏移量,根据消息的偏移量以及消息大小快速定位到消息的位置 当查找消息时采用二分查找 生产者 分区原因 方便在集群中扩展 提高并发 分区原则 producer在发送消息时把每条消息包装成一个producerRecoder对象 数据可靠性保障 为保障leader接收到数据之后,生产者可以继续发送数据,leader接收完数据在什么时候给生产者反馈(ac
2020-12-12 22:48:36 140
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人