Kafka
小鹅鹅
兴趣使然
展开
-
kafka 命令行工具常用命令行操作
文章目录1. 数据命令1.1 启动kafka服务1.2 创建topic1.3 向topic中发送数据1.4 开启一个消费端2. check命令2.1 查看kafka topic列表2.2 查看kafka特定topic的详情2.3 查看consumer group列表2.4 查看特定consumer group 详情2.5 查看指定topic上每个partition的offset1. 数据命令1...原创 2019-12-27 16:48:09 · 11406 阅读 · 0 评论 -
Kafka入门教程其一 消息队列基本概念 及常用Producer Consumer配置详解学习笔记
1. 综述Apache Kafka是基于发布/订阅的容错消息系统,由Scala和Java编写,是一个分布式消息队列,具有高性能、持久化、多副本备份、横向扩展能力。与其他消息传递系统相比,Kafka具有更好的吞吐量,内置分区,复制和固有的容错能力,这使得它非常适合大规模消息处理应用程序。Kafka适合离线和在线消息消费。 Kafka消息保留在磁盘上,并在群集内复制以防止数据丢失。 Kafka构...原创 2019-01-27 18:18:19 · 1208 阅读 · 0 评论 -
Kafka入门教程其二 生产与消费详解 Rebalance过程 leader选举过程
文章目录1. 概述2. 生产3. 消费1. 概述接着上一篇博客,本篇主要介绍Kafka的生产与消费的过程。Producers往Brokers里面的指定Topic中写消息,Consumers从Brokers里面拉去指定Topic的消息。图中有两个topic,topic 0有两个partition,topic 1有一个partition,三副本备份。2. 生产创建一条记录,记录中一个要指...原创 2019-02-17 22:33:13 · 1008 阅读 · 0 评论