大数据开发之kafka安装

安装kafka前需要安装zookeeper，参考https://blog.csdn.net/weixin_44772799/article/details/99545064

 

一、按需求下载kafka并传到centos

 

二、解压安装包

[root@hlh001 software]# tar -zxvf kafka_2.11-0.11.0.0.tgz -C /opt/module/

三、修改解压后的名称

[root@hlh001 module]# mv kafka_2.11-0.11.0.0/ kafka

四、在kafka文件中建logs文件

[root@hlh001 kafka]# mkdir logs

五、修改配置文件

[root@hlh001 config]# vim server.properties

 

	#全局唯一编号，不能重复 broker.id=0   #删除topic功能 delete.topic.enable=true # kafka运行日志存放的路径 log.dirs=/opt/module/kafka/logs #配置连接Zookeeper集群地址 zookeeper.connect=hlh001:2181,hlh002:2181,hlh003:2181

 

 

 

 

 

 

 

 

六、配置环境变量

[root@hlh001 config]# vim /etc/profile

#kafkahome

export KAFKA_HOME=/opt/module/kafka

export PATH=$PATH:$KAFKA_HOME/bin

[root@hlh003 config]# source /etc/profile

七、启动集群

先启动zookeeper: [root@hlh003 bin]# ./zkServer.sh start

[root@hlh001 bin]# kafka-server-start.sh ../config/server.properties &

八、查看进程

[root@hlh003 ~]# jps

4705 Kafka

4343 QuorumPeerMain

5050 Jps

九、停止集群

[root@hlh001 bin]# kafka-server-stop.sh stop