![](https://img-blog.csdnimg.cn/2019092715111047.png?x-oss-process=image/resize,m_fixed,h_224,w_224)
kafka学习笔记
kafka学习笔记
andyonlines
趁着热情还在,奋斗吧!
展开
-
3 kafka文件存储机制
文章目录1 kafka文件存储机制![在这里插入图片描述](https://img-blog.csdnimg.cn/img_convert/4565bde8485ebdf1c2111a6b14f03a96.png)2 索引文件和log文件的查找机制 1 kafka文件存储机制 kafka 采用分片和索引机制, 将每个partition分为多个segment.每个segment对应两个文件 – “index” 和 “log”.分别表示为segment索引文件和数据文件(引入索引文件的目的就是便于利用二分查找快原创 2021-07-22 09:38:06 · 105 阅读 · 0 评论 -
二 kafka的概念
文章目录1 什么是kafka2 组件概念2.1 broker2.2 topic2.3 partition2.4 producer2.5 consumer2.6 Consumer Group2.7 offset 1 什么是kafka kafka 是一个分布式的,分布订阅模式的消息队列. 2 组件概念 2.1 broker kafka的节点,一个kafka节点就是一个broker 2.2 topic topic就是数据主题,相当于给数据分类,不同的业务数据可以放到不同topic里面. 2.3 partition原创 2021-07-21 11:59:11 · 173 阅读 · 0 评论 -
一 kafka安装部署
文章目录1 server.properties2 kafka 群起脚本 1 server.properties #broker的全局唯一编号,不能重复 broker.id=0 #删除topic功能使能 delete.topic.enable=true #处理网络请求的线程数量 num.network.threads=3 #用来处理磁盘IO的现成数量 num.io.threads=8 #发送套接字的缓冲区大小 socket.send.buffer.bytes=102400 #接收套接字的缓冲区大小 socke原创 2021-06-19 18:26:08 · 88 阅读 · 2 评论