windows下安装kafka集群

版本环境:zookeeper-3.4.14 kafka-2.2.0
一 安装zookeeper集群
1.解压完成后修改conf/zoo.cfg
dataDir=D:/messege/zookeeper-3.4.14/data
dataLogDir=D:/messege/zookeeper-3.4.14/log
clientPort=2181
server.0=192.168.31.145:2888:3888
server.1=192.168.31.55:2888:3888
server.2=192.168.31.146:2888:3888
2.没有data和log文件夹的话创建,在data文件夹下添加文件myid(没有文件类型),内容为服务的id,与配置文件的配置对应。
3.分别在三台服务器中做相同修改操作,注意myid内容与配置内容对应 。
4.到解压的zookeeper/bin文件夹下输入:zkserver.cmd 分别启动三个服务。
5.注册windows服务:
5.1下载http://archive.apache.org/dist/commons/daemon/binaries/windows/
5.2将 prunsrv.exe、prunmgr.exe复制到zookeeper的bin路径下
5.3 新建一个install.bat文件,用于注册服务 (创建完成后双击即可完成服务注册),内容如下:

prunsrv.exe “//IS//%ZOOKEEPER_SERVICE%” ^
–DisplayName=“Zookeeper (%ZOOKEEPER_SERVICE%)” ^
–Description=“Zookeeper (%ZOOKEEPER_SERVICE%)” ^
–Startup=auto --StartMode=exe ^
–StartPath=%ZOOKEEPER_HOME% ^
–StartImage=%ZOOKEEPER_HOME%\bin\zkServer.cmd ^
–StopPath=%ZOOKEEPER_HOME%\ ^
–StopImage=%ZOOKEEPER_HOME%\bin\zkServerStop.cmd ^
–StopMode=exe --StopTimeout=5 ^
–LogPath=%ZOOKEEPER_HOME% --LogPrefix=zookeeper-wrapper ^
–PidFile=zookeeper.pid --LogLevel=Info --StdOutput=auto --StdError=auto
在这里插入图片描述
5.4 配置zk环境变量
在这里插入图片描述
二 安装kafka集群
1.解压安装包后修改配置文件 config/server.propertie 完整配置文件如下:

#在kafka这个集群中的唯一标识,且只能是正整数
broker.id=2
#生产者同步发送消息,保证消息不会丢失
producer.type=sync
request.required.acks=-1
max.in.flight.requests.per.connection = 1
#listener and port
listeners=PLAINTEXT://192.168.31.55:9092
#默认9092
port:9092
#分区数量 副本数量
num.partitions=3
offsets.topic.replication.factor=3
default.replication.factor=3
# A comma separated list of directories under which to store log files
#log.dirs=/tmp/kafka-logs
log.dirs=D:/messege/kafka_2.11-2.2.1/logs
#每个tipic的默认分区个数,在创建topic时可以重新制定

# root directory for all kafka znodes.
zookeeper.connect=192.168.31.55:2181,192.168.31.145:2181,192.168.31.146:2181

2.三台服务器的配置相同,只有listeners需要修改为对应机器ip, broker为服务id每台不同。
3.在安装目录下打开命令行输入:.\bin\windows\kafka-server-start.bat .\config\server.properties
分别启动kafka
4.安装windows服务:
4.1下载nssm 地址:http://www.nssm.cc/release/nssm-2.24.zip
4.2解压后cmd进入win64目录 nssm install
在这里插入图片描述
4.3点击install service 完成安装

kafka配置项说明:

#参数
producer.type=sync 
request.required.acks=-1

0 表示不确认是否commit成功
1 表示leader保存成功就返回成功(如果leader保存成功还没有follower成功时leader宕机,消息会丢失)
-1 表示leader和follower都成功才返回成功

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Windows上搭建Kafka集群,你需要按照以下步骤进行操作: 1. 下载Kafka安装包并解压缩。你可以在中找到Windows下的安装包和详细教程。 2. 配置Zookeeper集群Kafka依赖于Zookeeper进行集群管理。你可以在Kafka安装目录下的config文件夹中找到zookeeper.properties文件。打开该文件并配置Zookeeper集群的地址和端口。 3. 配置Kafka集群。你可以在Kafka安装目录下的config文件夹中找到server.properties文件。打开该文件并根据需要进行配置,比如监听地址、端口等。 4. 启动Zookeeper集群。可以使用命令行或者批处理文件启动Zookeeper集群。在命令行中执行"zookeeper-server-start.bat"命令,指定zookeeper.properties文件的路径,就可以启动Zookeeper集群。 5. 启动Kafka集群。使用命令行或者批处理文件启动Kafka集群。在命令行中执行"kafka-server-start.bat"命令,指定server.properties文件的路径,就可以启动Kafka集群。 6. 验证Kafka集群是否正常工作。你可以在命令行中执行"kafka-topics.bat --list --bootstrap-server localhost:9092"命令,验证是否能够列出Kafka集群中的主题。 这样,你就成功在Windows上搭建了Kafka集群。希望这些步骤对你有帮助!<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* [专栏大数据中windows下搭建kafka集群中需要用到的安装包](https://download.csdn.net/download/abc8125/86250322)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *2* *3* [WindowsKafka集群搭建](https://blog.csdn.net/HcJsJqJSSM/article/details/126752143)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值