kafka2.13及以上版本部署及创建topic

最新推荐文章于 2024-09-07 17:17:49 发布
最新推荐文章于 2024-09-07 17:17:49 发布
阅读量2k 收藏
点赞数 1
分类专栏： kafka 文章标签： kafka time out kafka命令 java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_38120374/article/details/121496611
版权

1.登陆kafka官网Index of /dist/kafka下载对应版本包

2.解压 

tar -xzvf  

进入到解压路径下kafka2.13

3.启动zookeeper

./bin/zookeeper-server-start.sh -daemon config/zookeeper.properties

4.启动kafka

./bin/kafka-server-start.sh -daemon config/server.properties

5.创建topic

kafka-topics.sh --create --bootstrap-server localhost:9092 --replication-factor 1 --partitions 1 --topic mytest

部署过程中的问题，创建topic超时，需要配置server.properties配置文件中

的zookeeper.connect=ip:port

以及

 ok现在可以启动服务进行测试了

zhangheng007a
关注
专栏目录
【项目实战】Kafka中Topic创建介绍
本本本添哥
03-30 8139
Topic可以看作是一个消息队列生产者将消息发送到Topic中，消费者从Topic中消费消息。
kafka 集群标准配置
zb313982521的博客
06-05 969
./kafka-topics.sh --create --zookeeper 192.168.22.110:2181, 192.168.22.111:2181, 192.168.22.112:2181 --replication-factor 2 --partitions 2 --topic idoall_testTopic ./kafka-topics.sh --list --zookeepe...
【kafka】单机环境kafka搭建
TBY_HUIER的博客
04-05 418
step1：解压kafka tar -zxvf kafka_2.13-2.4.0.tgz step2：启动zookeeper： # 启动zookeeper 服务 bin/zookeeper-server-start.sh ./config/zookeeper.properties # 停止zookeeper 服务 bin/zookeeper-server-stop.sh step3：启动...
Kafka原理剖析之「Topic创建」
最新发布
sjzsylkn的专栏
09-07 1897
Kafka提供了高性能的读写，而这些读写操作均是操作在Topic上的，Topic的创建就尤为关键，其中涉及分区分配策略、状态流转等，而Topic的新建语句非常简单--bootstrap-server localhost:9092 \ // 需要写入endpoints--create --topic topicA // 要创建的topic名称--partitions 10 // 当前要创建的topic分区数。
kafka_2.13-2.8.1环境搭建
hdsHDS6的博客
04-23 1337
本次kafka环境主要针对kafka2.x版本，运行kafka服务之前，需要先搭建zookeeper服务，因为kafka服务依赖zookeeper，kafka3.x版本后可以不需要手动搭建zookeeper了。 本文主要是介绍怎样搭建kafka2.8.1，关于kafka的操作，后续其他文章更新
Kafka安装教程
初听不知曲中意，再听已是曲中人。
12-17 2503
Kafka 实例 应用场景，京东 到货通知， 货到了 给客户提醒。。 生产者 消费者模式 加入储存中介，减少生产者与消费者的耦合，进行缓存，数据单元保证数据的完整性 优点： 实时的数据处理、消息持久化、负载均衡和故障转移 Kafka安装 下载kafka wget https://downloads.apache.org/kafka/2.8.0/kafka_2.13-2.8.0.tgz 安装 kafka tar -xvf kafka_2.13-2.8.0.tgz 修改 conf
kafka中关于消息的命令
wyqwilliam的博客
12-11 1974
bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test --from-beginning bin/kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic test6 --from-beginning bin/kaf...
KAFKA topic生成 消费
Tomas_White的博客
10-14 386
启动zookeeper 启动kafka，启动kafka时要启动zookeeper集群上所有的kafka，否则会出现找不到leader的错误 ./kafka-server-start.sh ../config/server.properties & 进入kafka的bin目录下 1.创建一个topic ./kafka-topics.sh --zookeeper hdp-1:2181...
kafka-2.13-2.8.0
02-14
《深入理解Kafka 2.8.0：基于2.13版本的分布式消息系统解析》 Apache Kafka是一个高性能、分布式的流处理平台，广泛应用于大数据实时处理、日志收集、用户行为分析等领域。Kafka 2.8.0是其最新的稳定版本，对之前的...
Kafka集群及Kafka-Manager安装部署.docx
02-07
### Kafka集群及Kafka-Manager安装部署 #### 一、Kafka集群的安装与配置 **1. 工作环境准备** - **JDK**：确保安装了JDK 1.8.0_60版本。这一步骤至关重要，因为Kafka依赖于Java运行时环境。 - **Zookeeper**...
kafka_2.13-3.2.1.tgz
08-04
Kafka的核心概念主要包括生产者（Producer）、消费者（Consumer）、主题（Topic）和分区（Partition）。生产者负责将消息发布到特定的主题中，而消费者则从这些主题中订阅并消费消息。主题是逻辑上的分类，可以将其...
kafka_2.13-2.5.1及安装方法
10-27
在`kafka_2.13-2.5.1`版本中，`2.13`表示使用的Scala版本，而`2.5.1`则是Kafka的版本号。这个版本引入了多项改进和新特性，例如性能优化、稳定性增强以及对新功能的支持。对于生产环境来说，选择稳定版本如2.5.1是很...
linux系统安装单节点kafka(2.13-3.2.1)
jerry764的博客
09-05 1207
在linux centOS系统中简易安装单节点单broker的kafka服务，包含安装jdk11以及环境配置，安装zookeeper以及配置，包括一些kafka常用简单指令操作.
kafka创建topic_Kafka 源码解析之 topic 创建过程（三）
weixin_39902875的博客
12-03 883
本文是 Kafka 源码解析的第三篇，主要讲述一个 topic 的创建过程，从 topic 是如何创建到 topic 真正创建成功的中间详细过程，文章主要内容可以分为以下几个部分：topic 是如何创建的？命令行创建；Producer 发送数据时，自动创建；topic 创建时，replicas 是如何分配的？指定 replicas 的分配；自动 replicas 分配；replicas 更新到 z...
kafka如何动态消费新增topic主题
lifewinnerforever的博客
02-22 4943
spring-kafka客户端接入新的主题消息，需要硬编码客户端代码，并且重新发布服务，开发成本高操作麻烦。 接入kafka-batch-starter组件可以满足动态接入的需求。
kafka基本操作
willyan2007的博客
04-25 191
一、topic 1.查看全部topic kafka-topics.sh --zookeeper localhost:2181 --list 2.创建topic，指定分区数目和备份因子 kafka-topics.sh --zookeeper localhost:2181 --create --topic topic_name --partitions 3 --replication-factor...
kafka 常用命令 版本kafka_2.13-2.6.0
m0_49605777的博客
08-26 1438
1、启动Kafka bin/kafka-server-start.sh -daemon config/server.properties 2、停止Kafka bin/kafka-server-stop.sh 3、创建Topic bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1 --partitions 1 --topic topic-name 4、查看已经创建的Topic bin/kafka-t
Kafka解析之topic创建(1)
热门推荐
朱小厮的博客
02-10 6万+
在使用kafka发送消息和消费消息之前，必须先要创建topic，在kafka中创建topic的方式有以下2种： 如果kafka broker中的config/server.properties配置文件中配置了auto.create.topics.enable参数为true（默认值就是true），那么当生产者向一个尚未创建的topic发送消息时，会自动创建一个num.partitions（默认值...
Kafka解析之topic创建(2)
朱小厮的博客
02-10 4668
前言 上一篇Kafka解析之topic创建(1)中的介绍了怎样创建一个topic以及对应的replica-assignment参数的一些使用细节，本文继续来讲述一下自动分配方案的具体算法实现，包括未指定机架的分配策略和指定机架的分配策略。 承接 如果在创建topic的时候并没有指定replica-assignment参数，那么就需要采用kafka默认的分区副本分配策略来创建topic。主要的...
Kafka 2.13版本3.6.2安装包介绍
Kafka 2.13-3.6.2版本是Kafka在2.13版本中针对Scala语言的一个分支版本，同时包含了Kafka软件的多个组件。版本号3.6.2表示这是在2.13版本基础上的一个具体版本更新。 本安装包中包含了Kafka的安装文件，可以通过...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值