linux下快速搭建kafka

废话不多说,直奔主题
感谢https://www.w3cschool.cn/apache_kafka/apache_kafka_quick_guide.html
的分享。

1.安装JDK

网上一大把,随便搜一下

2.安装Zookeeper

kafka依赖于Zookeeper

2.1下载Zookeeper

地址:http://zookeeper.apache.org/releases.html
(最新的zookeeper-3.4.8.tar)

2.2解压Zookeeper
1、*.tar 用 tar -xvf 解压

2、*.gz 用 gzip -d或者gunzip 解压

3、*.tar.gz和*.tgz 用 tar -xzf 解压

4、*.bz2 用 bzip2 -d或者用bunzip2 解压

5、*.tar.bz2用tar -xjf 解压

6、*.Z 用 uncompress 解压

7、*.tar.Z 用tar -xZf 解压

8、*.rar 用 unrar e解压

9、*.zip 用 unzip 解压

命令全在这,变弄边学习下

2.3修改配置文件

把 zoo_sample.cfg 改名成zoo.cfg

$ mv zoo_sample.cfg zoo.cfg

之后修改zoo.cfg内容

$ vi conf/zoo.cfg
dataDir=/var/tools/zookeeper-3.4.8/data     

也就是你的zookeeper安装路径

2.4启动
$ bin/zkServer.sh start

成功的话提示如下:

$ JMX enabled by default
$ Using config: ../zookeeper-3.4.8/bin/../conf/zoo.cfg
$ Starting zookeeper ... STARTED
2.4关闭
$ bin/zkServer.sh stop

3.安装Kafka

3.1下载

地址:http://kafka.apache.org/downloads.html
(kafka_2.11-0.11.0.1.tgz)

3.2解压Kafka

方法同上2.2:
建议把zookeeper和kafka下载完后一起传到linux上

3.3修改 server.properties

1.修改log.dirs,改成安装路径

log.dirs=/var/tools/kafka_2.11-0.11.0.1/kafka-logs

2.添加 host.name

host.name = kafka服务所在主机的ip

不添加的话本地是连接不到kafka服务的
3.修改启动文件kafka-server-start.sh
把启动文件里的xmx和xms调小一点,默认是1G
你可以根据你的JDK设置的xmx和xms调,使启动文件里的xmx和xms不要超过JDK中设置的数值
这里写图片描述

不更改的话启动会报错count not reserve enough space for 1048576KB object heap

3.4启动服务

后台启动:

 nohup bin/kafka-server-start.sh config/server.properties&
3.5创建topic

创建

bin/kafka-topics.sh --create --zookeeper localhost:2181 --replication-factor 1   
--partitions 1 --topic Hello-Kafka

显示所有topic

bin/kafka-topics.sh --list --zookeeper localhost:2181
3.6启动生产者发送消息
bin/kafka-console-producer.sh --broker-list localhost:9092 --topic test
3.7启动消费者消费消息

另起一个窗口

bin/kafka-console-consumer.sh --zookeeper localhost:2181 --topic test
3.8测试

在生产者窗口输入一条信息后 回车
消费者窗口就可以显示出来

到此OK啦~

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值