linux中Kafka集群的安装

本文详细介绍了在Linux上安装Kafka集群的步骤,包括准备三台虚拟机,启动Zookeeper集群,安装JDK,解压Kafka安装包,配置server.properties文件,设置环境变量,启动和关闭Kafka,以及创建、查询和删除topic的操作。同时,文中还提到了可能遇到的常见错误及解决办法。
摘要由CSDN通过智能技术生成

kafka安装的准备工作:

1.三台虚拟机
HadoopMaster:192.168.43.19(主节点)
HadoopSlave01:192.168.43.25(子节点)
HadoopSlave02:192.168.43.26(分节点)
2.启动zookeeper集群(kafka安装要在安装zookeeper前提下进行)
3.jdk安装


一、kafka是什么?

Kafka是由Apache软件基金会开发的一个开源流处理平台,由Scala和Java编写。Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者在网站中的所有动作流数据。

二、kafka安装步骤

1.导入kafka安装包

kafka_2.11-2.3.1.tgz(可在kafka官网中下载)
可通过Winscp把kafka数据压缩包传入到虚拟机中,可先在虚拟机中建立文件夹。
三台虚拟机要先建立免密登录,方便传输文件,此处不是必须建立。
在这里插入图片描述

2.虚拟机中安装步骤

1.解压压缩包(在HadoopMaster节点操作)

cd software;
tar -zvxf kafka_2.11-2.3.1.tgz 
mv kafka_2.11-2.3.1 kafka   

部分代码解析
software:刚刚传入kafka压缩包的文件
tar -zvxf 文件名:此处为文件解压命令
mv 原本的文件名 新的文件名

2.建立目录

cd kafka
mkdir kafka-logs

kafa:进入kafka目录中(在HadoopMaster节点操作)
mkdir:建立新目录的命令(此处建立了一个kafka-logs目录用来存放kafka消息)
在这里插入图片描述
3.配置server.properties 文件(在HadoopMa

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值