搭建kafka

一、KAFKA集群（0.8.2.2版本）
服务器 IP地址 端口
服务器1 192.168.88.5 9092
服务器2 192.168.88.6 9092
服务器3 192.168.88.7 9092
1.下载Kafka安装包
2.上传安装包
kafka_2.11-0.8.2.2.tgz
3.解压 改名

tar -zxvf kafka_2.11-0.8.2.2.tgz -C /usr/local
mv kafka_2.11-0.8.2.2 kafka

4.创建log文件夹

mkdir /usr/local/kafka/tmp/kafka-logs

5.修改配置文件 config/server.properties

broker.id=0 //当前机器在集群中的唯一标识3台机器的话 后面分别 是  1   2
host.name=192.168.88.5 //主机IP地址
log.dirs= /usr/local/kafka/tmp/kafka-logs //log存放目录
zookeeper.connect=192.168.88.5:2181,192.168.88.6:2181,192.168.88.7:2181

6.将配置好的kafka拷贝到其他机器上
7.启动kafka

./kafka-server-start.sh  -daemon ../config/server.properties   //后台启动运行

二、KAFKA集群验证
1.创建topic

./kafka-topics.sh --create --zookeeper 192.168.88.5:2181 --replication-factor 1 --partitions 1 --topic test

2.查看topic

 ./kafka-topics.sh --list --zookeeper 192.168.88.5:2181

3.开启发送者并发送消息

./kafka-console-producer.sh --broker-list 192.168.88.5:9092 --topic test

4.开启消费者并接收消息

./kafka-console-consumer.sh --zookeeper 192.168.88.7:2181 --topic test --from-beginning

三、KAFKA集群（0.10.2.1版本）
1.下载Kafka安装包
2.上传安装包
kafka_2.11-0.10.2.1.tgz
3.解压 改名

tar -zxvf kafka_2.11-0.10.2.1.tgz -C /usr/local
mv kafka_2.11-0.10.2.1 kafka

4.创建log文件夹

mkdir /usr/local/kafka/tmp

5.修改配置文件 config/server.properties

broker.id=0 //当前机器在集群中的唯一标识3台机器的话 后面分别 是  1   2
delete.topic.enable=true
log.dirs=/usr/local/kafka/tmp
 zookeeper.connect=192.168.88.5:2181,192.168.88.6:2181,192.168.88.7:2181

6.启动kafka

./kafka-server-start.sh  -daemon ../config/server.properties   //后台启动运行