环境准备:
zookeeper集群搭建
机器名称 | IP |
---|---|
master | 192.168.43.32 |
slave1 | 192.168.43.14 |
slave2 | 192.168.43.183 |
kafka集群搭建
1. 把Kafka2.10上传到/usr/local目录下解压:
tar -zxvf kafka_2.10-0.10.1.0.tgz
2. 重命名:mv kafka_2.10-0.10.1.0 kafka
3. 修改环境变量(所有节点)
Vi /etc/profile
在里面添加如下内容:
export KAFKA_HOME=/usr/local/kafka
PATH=${KAFKA_HOME}/bin:$PATH
刷新环境变量:source /etc/profile
4. 修改配置文件
(1) master:
Cd /usr/local/kafka/config
vi server.properties
在里面添加如下内容:
broker.id=1
host.name=master
listeners=PLAINTEXT://master:9092
zookeeper.connect=master:2181,slave1:2181,slave2:2181
(2)slave1:
Cd /usr/local/kafka/config
vi server.properties
在里面添加如下内容:
broker.id=2
host.name=slave1
listeners=PLAINTEXT://slave1:9092
zookeeper.connect=master:2181,slave1:2181,slave2:2181
(3)slave2:
Cd /usr/local/kafka/config
vi server.properties
在里面添加如下内容:
broker.id=3
host.name=slave2
listeners=PLAINTEXT://slave2:9092
zookeeper.connect=master:2181,slave1:2181,slave2:2181
6. 所有节点启动zookeeper
zkServer.sh start
7. 所有节点启动kafka
kafka-server-start.sh -daemon config/server.properties
8. 创建一个topic
kafka-topics.sh --create --zookeeper master:2181 --replication-factor 1 --partitions 1 --topic NBH
9. 查看所有topic:
kafka-topics.sh --list --zookeeper master:2181