kafka的安装和群起脚本

最新推荐文章于 2022-05-02 23:49:43 发布
最新推荐文章于 2022-05-02 23:49:43 发布
阅读量379 收藏 1
点赞数
分类专栏： kafka 文章标签： kafka 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_44739500/article/details/112299527
版权
本文详细介绍了Kafka的安装步骤，包括集群规划、上传解压、配置、设置环境变量、分发安装包及启动测试。重点讲述了如何创建logs文件夹，修改配置文件，并提供了群起Zookeeper和Kafka的脚本操作。
摘要由CSDN通过智能技术生成

Kafka的安装

1 集群的规划

hadoop02		hadoop03		hadoop04
zk				 zk				   zk
kafka			  kafka			      kafka

先启动zk，然后启动kafka。

2 上传解压

1）上传到服务器

[code1997@hadoop02 software]$ tar -zxvf kafka_2.11-0.11.0.0.tgz

2）复制到/opt/module目录下

[code1997@hadoop02 kafka]$ mv kafka_2.11-0.11.0.0 /opt/module/kafka

3）查看目录结构：

image-20210106202442454

3 配置

1）在/opt/module/kafka目录下创建logs文件夹。

[code1997@hadoop02 kafka]$ mkdir logs

2）修改配置文件：

[code1997@hadoop02 kafka]$ cd config/
[
最低0.47元/天 解锁文章
code1997
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
纯手动搭建大数据集群架构_记录015_安装部署kafka3.0.0集群_配置kafka群起脚本_安装配置kafka_eagle监控大屏_群起脚本失效解决---大数据之Hadoop3.x工作笔记0176
添柴程序猿的专栏
03-24 160
然后再来配置一下zookeeper.connect,zk的集群位置,这里注意,后面加个/kafka,意思是让zk管理的时候,做个区分,把管理kafka的数据,都放到kafka这个文件夹中,这样比较清晰。可以看到我们去启动kafka就可以, 这里注意,要手动的启动,集群中所有的机器上的kafka,这样比较麻烦,后面我们做一个脚本来实现群起.首先这个broker.id=0 broker.id=1...这里我们就配置成0,1,2,3,...这样就可以了,在集群中这样配置。
kafka群起脚本启动不了：nohup: failed to run command `java‘: No such file or directory
chenzhipeng111111的博客
02-08 2036
kafka群起脚本启动不了：nohup: failed to run command `java’: No such file or directory 原先脚本停止是可以的，但是启动不行启动不了： #!/bin/bash case $1 in "start"){ for i in hadoop102 hadoop103 hadoop104 do echo " --------start $i Kafka-------" ssh $i "/opt/modul
kafka+zookeeper高可用集群搭建shell使用脚本
02-22
kafka+zookeeper高可用集群搭建shell使用脚本，直接在linux运行就行
Kafka群起脚本
weixin_43558205的博客
02-21 210
Kafka群起脚本 添加群启脚本配置文件 vim /usr/bin/start-kafka.sh 配置内容如下： #!/bin/bash case $1 in "start"){ for i in hadoop102 hadoop103 hadoop104 do echo $"INFO:=========== $i kafka 正在启动 ============" ssh $i "/opt/module/kafka/bin/kafka-server-start.sh -dae
kafka群起脚本
子清的博客
02-04 273
（1）在/root/bin目录下创建脚本kf.sh vim kf.sh 在脚本中填写如下内容 #!/bin/bash case $1 in "start"){ for i in hadoop102 hadoop103 hadoop104 do echo " --------启动 $i Kafka-------" ssh $i "/opt/module/kafka/bin/kafka-server-start.sh -daemon /opt/module/k
Kafka集群安装部署与启动脚本
搁浅记忆的博客
01-04 484
Kafka 2.1 安装部署 2.1.1 集群规划 hadoop102 hadoop103 hadoop104 zk zk zk kafka kafka kafka 2.1.2 jar包下载 http://kafka.apache.org/downloads 2.1.3 集群部署 1）解压安装包 [at.
kafka群起脚本失败
weixin_45721882的博客
04-22 522
脚本代码： #!/bin/bash case $1 in "start"){ for i in hadoop01 hadoop02 hadoop03 do echo "-----------$i Kafka start------------------" ssh $i "/opt/kafka/bin/kafka-server-start.sh -daemon /opt/kafka/config/serv
关于zookeeper和Kafka群起失败的问题
weixin_45824204的博客
07-28 210
zookeeper和Kafka，写完脚本后，可以群关，却不能群起。 以zookeeper为例。我的单点启动和关闭都是正常状态。 在~/bin目录下，创建了群发脚本zk.sh，创建之后修改了权限，chmod 777 zk.sh 启动后，显示已经启动，但是jps查看进程，却没有启动成功。 在群起脚本的start中加入source /etc/profile;成功解决这个问题。 启动成功 ...
Kafka集群群起、群停脚本
liuwei0376的专栏
05-02 826
kafka-mgr.sh 脚本清单： #!/bin/bash if [ $# -lt 1 ] then echo "Please type parameter like <start> or <stop>" exit ; fi case $1 in "start"){ echo " ================= 启动 Kafka集群 =================" for host in hadoop
关于群起kafka脚本
luluxiu_1999的博客
10-07 2245
启动和停止脚本，因为路径经常出错，导致启动或者停止不成功。此脚本需要在/etc/profile文件里配置KAFKA_HOME。 使用方法：<自定义的文件名> start/stop 例： kk.sh start kk.sh stop hadoop102等是hosts中配置的主机名。 #!/bin/bash case $1 in "start"){ for i in hadoop102 hadoop103 hadoop104 do echo "************
kafka安装基于脚本
Jason_SDN的博客
03-26 2702
说明:此脚本适用于centos、ubuntu系统，安装kafka版本为3.1 废话不多说直接上脚本！ #!/bin/bash # #******************************************************************** #Author: Jason #QQ: 1654028243 #Date: 2022-03-26 #FileName： install_kafka.sh #URL: jaso
Shell脚本：Kafka群起脚本
Markble
08-14 1334
一、简单脚本 #! /bin/bash case $1 in "start"){ for i in hadoop12 alihadoop13 alihadoop14 do echo " --------启动 $i Kafka-------" ssh $i "/opt/module/kafka/bin/kafka-server-start.sh -daemon /opt/module/kafka/config/server.properties" d
Kafka 集群启动脚本
zzShine的专栏
01-23 2565
启动脚本在$Kafka_home/bin下 touch kafka-start-cluster.sh，并chmod a+x kafka-start-cluster.sh#!/bin/bashbrokers="mini05 mini06 mini07" kafka_home="/home/apps/kafka"for i in $brokers do echo "Starting kafka
kafka集群启动脚本
m0_48830183的博客
03-06 279
1: 在 /usr/local/bin 目录下touch xkafka.sh 2：脚本编写 #!/bin/bash #判断用户是否传参 if [ $# -ne 1 ];then echo "无效参数，用法为: $0 {start|stop}" exit fi #获取用户输入的命令 cmd=$1 for (( i=101 ; i<=103 ; i++ )) ;do tput setaf 2 echo ========== hadoop${i} $cmd ==...
Kafka集群安装与使用详解
6. 创建Topic，使用bin/kafka-topics.sh脚本定义Topic的Partition数量和Replication Factor。 7. 安装Producer和Consumer客户端，编写代码发布和消费消息。 使用Kafka时，你可以选择使用Java、Python或其他支持的...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值