Kafka
文章平均质量分 91
透过水花看花儿
未来,永远都是不期而遇,所以随时都会做好准备。
展开
-
Kafka文件存储机制详解
Kafka文件存储机制详解一、Kafka粗略解释二、Kafka的名词解释三、Kafka文件存储机制1、partiton(分区)中文件存储方式2、partiton中segment文件存储结构3、消息的物理结构a、那么如何在分区中通过offset查找消息?总结Kafka高效文件存储设计特点 一、Kafka粗略解释 Kafka是一个分布式、分区的、多副本的、多订阅者,基于zookeeper协调的分布式日志系统(也可以当做MQ系统),常见可以用于web/nginx日志、访问日志,消息服务等(注重于消息队列的使用)原创 2021-07-27 00:42:29 · 1060 阅读 · 0 评论 -
Kafka的相关原理
Kafka原理条例一、Kafka术语解释 一、Kafka术语解释 Producer:kafka生产者,Kafka集群的数据都是生产者发送上报的; leastLoadedNode:kafka集群中负载最低的节点,通常生产者客户端向其发送MetaDataRequest(元数据请求)获取元数据信息,从而获取各个消息发送请求对应的元数据更新; Broker:每个Broker算是一个Kafka的集群节点; Consumer:a、每个Kafka的数据都会被1个或者多个Consumer线程所消费;b、kafka一个分区原创 2021-07-23 20:59:43 · 109 阅读 · 0 评论