kafka 集群版本搭建

一、准备内容:

1.jdk(1.8)

2.zookeeper.tar(3.6)

3.kafka.tar(2.13-2.4.1)

二、安装jdk

  1. 将下载好的jdk解压到指定的文件夹下
  2. 卸载linux自带jdk
  3. 编辑/etc/profile 文件 添加一下内容

         export JAVA_HOME=/opt/jdk1.8 #jdk的解压路径,
         export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar
         export PATH=$PATH:$JAVA_HOME/bin

    4.重新加载配置文件 命令:source /etc/profile

    5. 通过命令查看是否安装成功:java -version

三、安装zookeeper

  1. 解压zookeeper文件到指定的文件夹下
  2. 进入conf文件夹下,复制zoo_sample.cfg文件到当前文件夹下,命名为zoo.cfg
  3. 修改zoo.cfg文件,修改内容如图,具体数量根据自己节点数来增删,若linux没有配置hosts的话 需要使用IP来进行判断
  4. 在dataDir配置的路径下创建myid文件,并在文件内天上对应的数字(zoo.cfg中本机ip对应的server.X中的X)
  5. 进入到bin目录下 执行 ./zkServer.sh start 启动zookeeper
  6. 以上操作每台机器都需要进行配置
  7. 注意:配置文件中不要自己添加额外的空格,会导致报错。我就曾在端口端口号后面多了一个空格 找了一个小时的报错。。。
  8. 若启动失败 查看2181 2888 3888三个端口是否有被占用情况

四、安装kafka

  1. 解压kafka文件到指定文件夹
  2. 进入到config文件夹,修改server.properties文件夹 修改内容如下

          broker.id=1 #需要与zookeeper中myid中的数字相对应

          listeners=PLAINTEXT://cdh1:9092  #若没配置hosts的话 需要使用IP进行配置

          delete.topic.enable=true #默认为false 若不设置,topic不会被彻底删除,而是一种类似于禁用的状态()

          advertised.listeners=PLAINTEXT://cdh1:9092 #若没配置hosts的话 需要使用IP进行配置

          log.dirs=/opt/kafka/logs  #存放一些log文件以及创建了的topic文件

     3.返回kafka目录,执行 ./bin/kafka-server-start conifg/server.properties 启动kafka服务

     4.使用命令和单机版kafka一致

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值