一、准备内容:
1.jdk(1.8)
2.zookeeper.tar(3.6)
3.kafka.tar(2.13-2.4.1)
二、安装jdk
- 将下载好的jdk解压到指定的文件夹下
- 卸载linux自带jdk
- 编辑/etc/profile 文件 添加一下内容
export JAVA_HOME=/opt/jdk1.8 #jdk的解压路径,
export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
export PATH=$PATH:$JAVA_HOME/bin
4.重新加载配置文件 命令:source /etc/profile
5. 通过命令查看是否安装成功:java -version
三、安装zookeeper
- 解压zookeeper文件到指定的文件夹下
- 进入conf文件夹下,复制zoo_sample.cfg文件到当前文件夹下,命名为zoo.cfg
- 修改zoo.cfg文件,修改内容如图,具体数量根据自己节点数来增删,若linux没有配置hosts的话 需要使用IP来进行判断
- 在dataDir配置的路径下创建myid文件,并在文件内天上对应的数字(zoo.cfg中本机ip对应的server.X中的X)
- 进入到bin目录下 执行 ./zkServer.sh start 启动zookeeper
- 以上操作每台机器都需要进行配置
- 注意:配置文件中不要自己添加额外的空格,会导致报错。我就曾在端口端口号后面多了一个空格 找了一个小时的报错。。。
- 若启动失败 查看2181 2888 3888三个端口是否有被占用情况
四、安装kafka
- 解压kafka文件到指定文件夹
- 进入到config文件夹,修改server.properties文件夹 修改内容如下
broker.id=1 #需要与zookeeper中myid中的数字相对应
listeners=PLAINTEXT://cdh1:9092 #若没配置hosts的话 需要使用IP进行配置
delete.topic.enable=true #默认为false 若不设置,topic不会被彻底删除,而是一种类似于禁用的状态()
advertised.listeners=PLAINTEXT://cdh1:9092 #若没配置hosts的话 需要使用IP进行配置
log.dirs=/opt/kafka/logs #存放一些log文件以及创建了的topic文件
3.返回kafka目录,执行 ./bin/kafka-server-start conifg/server.properties 启动kafka服务
4.使用命令和单机版kafka一致