kafka消息中间件

kafka与zookeeper安装包：

链接：https://pan.baidu.com/s/1b4DkzQttIfkA6DilC5AsWg?pwd=i9s9 
提取码：i9s9

---

一、kafka依赖

1：需要jdk（我这使用的是1.8）

yum -y install java-1.8.0-openjdk

2：需要zookeeper

1 > 解压：tar -zxvf  包名

2 > cd /usr/local/zookeeper/zookeeper-3.4.12

3 > mkdir data    #创建数据存放位置

4 > mkdir log       #创建日志存放位置

5 > cd /usr/local/zookeeper/zookeeper-3.4.12/conf  #cd 到配置文件目录下

6 > cp zoo_sample.cfg zoo.cfg     #备份一份数据

7 > vim zoo.cfg      #重新配置dataDir和dataLogDir的存储路径

 3：启动zookeeper

在bin目录下

#启动Zookeeper

./zkServer.sh start

#查询Zookeeper状态

./zkServer.sh status

#关闭Zookeeper状态

./zkServer.sh stop

注：若zookeeper启动失败，那么修改zkServer.sh里面的内容

 二、安装kafka

1：配置

解压文件

tar -xvf 包名

#编辑server.properties
vim server.properties

server.properties文件内容如下：
broker.id=0
listeners=PLAINTEXT://localhost:9092       #这里把#删除打开这个配置
num.network.threads=3
num.io.threads=8
socket.send.buffer.bytes=102400
socket.receive.buffer.bytes=102400
socket.request.max.bytes=104857600
log.dirs=/tmp/kafka-logs
num.partitions=1
num.recovery.threads.per.data.dir=1
offsets.topic.replication.factor=1
transaction.state.log.replication.factor=1
transaction.state.log.min.isr=1
log.retention.hours=168
log.segment.bytes=1073741824
log.retention.check.interval.ms=300000
zookeeper.connect=localhost:2181
zookeeper.connection.timeout.ms=6000
group.initial.rebalance.delay.ms=0

其中有四个重要的参数：
• broker.id：唯一标识ID
• listeners=PLAINTEXT://localhost:9092：kafka服务监听地址和端口
• log.dirs：日志存储目录
• zookeeper.connect：指定zookeeper服务地址
可根据自己需求修改对应的配置！

 2：启动（bin目录下，否者加上绝对路劲）

./kafka-server-start.sh  -daemon ../config/server.properties

3：创建主题（lkx 这个主题名称根据自己调整）

./kafka-topics.sh --bootstrap-server localhost:9092 --create --topic lkx --partitions 2 --replication-factor 1 

4：创建完之后查看

./kafka-topics.sh --list --bootstrap-server localhost:9092

 5：发送测试

./kafka-console-producer.sh --broker-list localhost:9092 --topic lkx

6：接收测试

 ./kafka-console-consumer.sh --bootstrap-server localhost:9092 --topic lkx --from-beginning

另外的是写文档之前插入的