Kafka实战记录（1）-安装部署：

目录

Kafka实战记录-目录：https://blog.csdn.net/weixin_39565597/article/details/104402046

1、介绍

Kafka是一个分布式消息队列。Producer（生产者） push（推送） 消息到Broker Cluster（kafka集群），Comsumer（消费者）pull（拉取）消息进行消费。全过程均是基于Zookeeper进行的。
Zookeeper实战记录-目录：https://blog.csdn.net/weixin_39565597/article/details/104401912

2、安装

官方下载地址：http://mirror.bit.edu.cn/apache/kafka（下载/2.2.2/kafka_2.11-2.2.2.tgz文件）
安装前准备环境：Centos、jdk、zookeeper
安装位置：/opt/soft/kafka-2.2.2
集群安装（3台服务器）：
192.168.220.151 node1
192.168.220.152 node2
192.168.220.153 node3

2.1、单机安装

# 创建数据存放路径
[root@node1 kafka-2.2.2] mkdir data
# 修改配置文件，保存
[root@node1 kafka-2.2.2] vim ./config/server.properties
log.dirs=/opt/soft/kafka-2.2.2/data # 数据存放路径，此处log为数据
zookeeper.connect=node1:2181 # zookeeper集群地址
# 启动kafka
[root@node1 kafka-2.2.2] ./bin/kafka-server-start.sh ./config/server.properties
# 关闭kafka
[root@node1 kafka-2.2.2] ./bin/kafka-server-stop.sh stop

2.2、集群安装

node1：

# 创建数据存放路径
[root@node1 kafka-2.2.2] mkdir data 
# 修改配置文件，保存
[root@node1 kafka-2.2.2] vim ./config/server.properties
broker.id=1
log.dirs=/opt/soft/kafka-2.2.2/data # 数据存放路径，此处log为数据
zookeeper.connect=node1:2181,node2:2181,node3:2181 # zookeeper集群地址
# 分发文件夹至其它节点
[root@node1 kafka-2.2.2]# scp -r /opt/soft/kafka-2.2.2 root@node2:/opt/soft/
[root@node1 kafka-2.2.2]# scp -r /opt/soft/kafka-2.2.2 root@node3:/opt/soft/

node2:

# 修改配置文件的brokerid，节点id必须唯一
[root@node2 kafka-2.2.2] vim ./config/server.properties
broker.id=2

node3:

# 修改配置文件的brokerid，节点id必须唯一
[root@node3 kafka-2.2.2] vim ./config/server.properties
broker.id=3

各个节点

# 启动各个节点
[root@node1 kafka-2.2.2] ./bin/kafka-server-start.sh ./config/server.properties
[root@node2 kafka-2.2.2] ./bin/kafka-server-start.sh ./config/server.properties
[root@node3 kafka-2.2.2] ./bin/kafka-server-start.sh ./config/server.properties

# 关闭各个节点
[root@node1 kafka-2.2.2] ./bin/kafka-server-stop.sh stop
[root@node2 kafka-2.2.2] ./bin/kafka-server-stop.sh stop
[root@node3 kafka-2.2.2] ./bin/kafka-server-stop.sh stop