Docker安装KafKa并测试

最新推荐文章于 2024-06-25 13:52:08 发布
最新推荐文章于 2024-06-25 13:52:08 发布
阅读量691 收藏 3
点赞数 1
分类专栏： Linux运维部署相关 文章标签： docker kafka java linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m4330187/article/details/115206763
版权

一、查找镜像

系统环境为 CentOS 7.3
查找 kafka 和 zookeeper 结果如下

[root@localhost ~]# docker search kafka
NAME                                    DESCRIPTION                                     STARS     OFFICIAL   AUTOMATED
wurstmeister/kafka                      Multi-Broker Apache Kafka Image                 1336                 [OK]
spotify/kafka                           A simple docker image with both Kafka and Zo…   411                  [OK]
bitnami/kafka                           Apache Kafka is a distributed streaming plat…   218                  [OK]
sheepkiller/kafka-manager               kafka-manager                                   201                  [OK]
ches/kafka                              Apache Kafka. Tagged versions. JMX. Cluster-…   117                  [OK]
kafkamanager/kafka-manager              Docker image for Kafka manager                  112                  
hlebalbau/kafka-manager                 CMAK (previous known as Kafka Manager) As Do…   81                   [OK]
landoop/kafka-topics-ui                 UI for viewing Kafka Topics config and data …   36                   [OK]
johnnypark/kafka-zookeeper              Kafka and Zookeeper combined image              22                   
solsson/kafka                           http://kafka.apache.org/documentation.html#q…   21                   [OK]
landoop/kafka-lenses-dev                Lenses with Kafka. +Connect +Generators +Con…   20                   [OK]
debezium/kafka                          Kafka image required when running the Debezi…   19                   [OK]
landoop/kafka-connect-ui                Web based UI for Kafka Connect.                 17                   [OK]
danielqsj/kafka-exporter                Kafka exporter for Prometheus                   17                   [OK]
digitalwonderland/kafka                 Latest Kafka - clusterable                      15                   [OK]
tchiotludo/kafkahq                      Kafka GUI to view topics, topics data, consu…   6                    [OK]
solsson/kafka-manager                   Deprecated in favor of solsson/kafka:cmak       5                    [OK]
solsson/kafka-prometheus-jmx-exporter   For monitoring of Kubernetes Kafka clusters …   4                    [OK]
solsson/kafkacat                        https://github.com/edenhill/kafkacat/pull/110   4                    [OK]
mesosphere/kafka-client                 Kafka client                                    3                    [OK]
zenko/kafka-manager                     Kafka Manger https://github.com/yahoo/kafka-…   2                    [OK]
anchorfree/kafka                        Kafka broker and Zookeeper image                2                    
zenreach/kafka-connect                  Zenreach's Kafka Connect Docker Image           2                    
openwhisk/kafkaprovider                 Apache OpenWhisk event provider service for …   2                    [OK]
solsson/kafka-monitor                   https://github.com/linkedin/kafka-monitor fo…   2                    [OK]

[root@localhost ~]# docker search zookeeper
NAME                               DESCRIPTION                                     STARS     OFFICIAL   AUTOMATED
zookeeper                          Apache ZooKeeper is an open-source server wh…   1041      [OK]       
jplock/zookeeper                   Builds a docker image for Zookeeper version …   166                  [OK]
wurstmeister/zookeeper                                                             141                  [OK]
mesoscloud/zookeeper               ZooKeeper                                       73                   [OK]
bitnami/zookeeper                  ZooKeeper is a centralized service for distr…   54                   [OK]
digitalwonderland/zookeeper        Latest Zookeeper - clusterable                  23                   [OK]
mbabineau/zookeeper-exhibitor                                                      23                   [OK]
tobilg/zookeeper-webui             Docker image for using `zk-web` as ZooKeeper…   15                   [OK]
debezium/zookeeper                 Zookeeper image required when running the De…   14                   [OK]
confluent/zookeeper                [deprecated - please use confluentinc/cp-zoo…   13                   [OK]
31z4/zookeeper                     Dockerized Apache Zookeeper.                    9                    [OK]
thefactory/zookeeper-exhibitor     Exhibitor-managed ZooKeeper with S3 backups …   6                    [OK]
emccorp/zookeeper                  Zookeeper                                       2                    
engapa/zookeeper                   Zookeeper image optimised for being used int…   2                    
duffqiu/zookeeper-cli                                                              1                    [OK]
paulbrown/zookeeper                Zookeeper on Kubernetes (PetSet)                1                    [OK]
openshift/zookeeper-346-fedora20   ZooKeeper 3.4.6 with replication support        1                    
perrykim/zookeeper                 k8s - zookeeper  ( forked k8s contrib )         1                    [OK]
josdotso/zookeeper-exporter        ref: https://github.com/carlpett/zookeeper_e…   1                    [OK]
strimzi/zookeeper                                                                  1                    
midonet/zookeeper                  Dockerfile for a Zookeeper server.              0                    [OK]
pravega/zookeeper-operator         Kubernetes operator for Zookeeper               0                    
humio/zookeeper-dev                zookeeper build with zulu jvm.                  0                    
dabealu/zookeeper-exporter         zookeeper exporter for prometheus               0                    [OK]
phenompeople/zookeeper             Apache ZooKeeper is an open-source server wh…   0                    [OK]

需要安装 wurstmeister/kafka 和 ==wurstmeister/zookeeper ==这两个镜像。

二、镜像拉取

docker pull wurstmeister/kafka
docker pull wurstmeister/zookeeper

三、启动容器

Zookeeper

docker run -d --name zookeeper -p 2181:2181 -t wurstmeister/zookeeper

KafKa

 docker run -d --name kafka -p 9092:9092 -e KAFKA_BROKER_ID=0 -e KAFKA_ZOOKEEPER_CONNECT=[ip]:2181 -e KAFKA_ADVERTISED_LISTENERS=PLAINTEXT://[ip]:9092 -e KAFKA_LISTENERS=PLAINTEXT://0.0.0.0:9092 -t wurstmeister/kafka:2.12-2.3.0

注意：上面的IP一般设置为宿主机的IP地址，然后开放宿主机对应映射的端口，不然会访问不到

三、测试

运行容器结果

[root@localhost ~]# docker ps 
CONTAINER ID   IMAGE                       COMMAND                  CREATED       STATUS       PORTS                                                 NAMES
d812897912f5   wurstmeister/kafka:latest   "start-kafka.sh"         3 hours ago   Up 2 hours   0.0.0.0:9092->9092/tcp                                kafka
809862829ace   wurstmeister/zookeeper      "/bin/sh -c '/usr/sb…"   3 hours ago   Up 2 hours   22/tcp, 2888/tcp, 3888/tcp, 0.0.0.0:49154->2181/tcp   zookeeper

测试结果如下图，启动一个kafka的springboot应用，编写测试发送消息和接受消息接口。
在这里插入图片描述

向kafka发送消息，结果如下，成功
在这里插入图片描述

上述的demo代码例子已上传gitee：
https://gitee.com/lin_zhi_peng/kafkaprogram.git

林志鹏JAVA
关注
  • 1
    点赞
  • 踩
  • 3
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 2
    评论
专栏目录
Docker安装kafka+zookeeper，并进行测试
seowen的开发 小本子
11-15 2017
安装kafka前提，需要依赖zookper,所以需要先安装 zookper 1、安装zookeeper sudo docker run -dit \ --net docker-hadoop-net \ --ip 172.170.0.12 \ --restart=always \ --hostname=hadoop_zookeeper \ --name=hadoop-zookeeper \ -...
利用docker和docker-compose部署单机kafka
01-20
本文将详细介绍如何使用Docker和Docker Compose部署单机版Apache Kafka，以及如何进行测试和验证其工作状态。 1. **Docker基础** Docker是一种流行的容器化技术，它允许我们将应用程序及其依赖环境打包成独立的可...
docker安装kafka并测试
AinUser的博客
08-25 1044
# 1. 下载docker镜像 docker pull wurstmeister/zookeeper docker pull wurstmeister/kafka # 2. 启动zookeeper (单机方式) docker run -d --name zookeeper -p 2181:2181 -t wurstmeister/zookeeper # 3. 启动kafka (单机方式) 注：下面启动命令中的IP(192.168.213.213)需要更换为你的服务器/虚拟机的静态IP docker.
【Linux】Docker安装kafka教程（超详细保姆篇）
最新发布
A的博客
06-25 2938
docker exec：这是Docker的一个命令，用于在运行的Docker容器中执行命令。 - -it：这是两个选项的组合。-i 选项让Docker的输入保持打开，-t 选项让Docker分配一个伪终端（pseudo-tty）。 kafka：这是你要在其中执行命令的Docker容器的名称。 /bin/bash：这是你要在Docker容器中执行的命令。在这个例子中，你是在打开一个bash shell
使用Docker测试您的Kafka应用程序
专业的开发者“讨论”
04-22 372
I recently came across testcontainers-java which is a Java library that supports JUnit tests, providing lightweight, throwaway instances of common databases, Selenium web browsers, or anythin...
Docker下安装Kafka及测试
mtm001的专栏
02-23 1652
第一步：安装zookeper docker pullzookeeper 第二步：安装kafka docker pull wurstmeister/kafka 第三步：启动zookeper容器 docker run -d --name zookeeper -p 2181:2181 -t zookeeper 第四步：启动kafka docker run -d --name kafka -p 9092:9092 -e KAFKA_BROKER_I...
docker安装kafka，并进行简单的测试
weixin_37702260的博客
12-30 964
centos安装docker(不再赘述，参考https://www.runoob.com/docker/centos-docker-install.html)，关于下载慢的可以修改docker镜像源为阿里云的，然后基于docker安装kafka 1.安装前要先了解：由于kafka依赖zookeeper环境，所以要先安装zookeeper、再安装kafka 2.安装zookeeper sudo docker pull wurstmeister/zookeeper 3.安装kafka sud
Docker搭建Zookeeper&Kafka集群的实现
01-11
最近在学习Kafka，准备测试集群状态的时候感觉无论是开三台虚拟机或者在一台虚拟机开辟三个不同的端口号都太麻烦了（嗯。。主要是懒）。 环境准备 一台可以上网且有CentOS7虚拟机的电脑 为什么使用虚拟机？因为使用...
一键快速部署测试生产环境kafka集群
04-23
linux环境实现shell一键部署docker容器运行kafka集群（docker-compose实现集群启动，内置kafka-manager、zookeeper）
mirrormaker-docker:用于 apache kafka mirrormaker 的 Docker
06-24
Apache kafka mirrormaker 的 Docker 设置 要求 码头工人 docker-enter（使用$> docker run --rm -v /usr/local/bin:/target jpetazzo/nsenter ） 图 设置 修改KAFKA_ADVERTISED_HOST_NAME中的所有KAFKA_...
部署zookeeper+kafka
04-25
一、二进制安装 1.安装jdk，二进制安装以及yum安装 2.安装zookeeper ...二、docker安装 1.搭建zookeeper集群 2.搭建kafka集群 3.测试Zookeeper中Kafka节点信息 4.测试Kafka中创建Topic，Zookeeper中的接受情况
docker安装kafka指令
03-14
docker 安装kafka指令（映射挂载宿主机）
Docker简单安装Kafka及测试-亲测成功
xiaozhuzhuyang的博客
05-19 1163
Docker简单安装kafka及测试-亲测成功 kafka简介： Kafka是由Apache软件基金会开发的一个开源流处理平台，由Scala和Java编写。Kafka是一种高吞吐量的分布式发布订阅消息系统，它可以处理消费者在网站中的所有动作流数据。 这种动作（网页浏览，搜索和其他用户的行动）是在现代网络上的许多社会功能的一个关键因素。 这些数据通常是由于吞吐量的要求而通过处理日志和日志聚合来解决。 对于像Hadoop一样的日志数据和离线分析系统，但又要求实时处理的限制，这是一个可行的解决方案。Kafka的目
【Docker】手把手教你使用Docker安装kafka【详细教程】
热门推荐
m0_64210833的博客
11-03 2万+
手把手教你使用Docker安装kafka
Docker中配置并测试kafka环境（windows10）
wulitaotao96的博客
12-03 672
记录一下在windows下Docker环境中配置kafka的过程。 第一步： 拉取zookeeper镜像，并启动容器 docker pull wurstmeister/zookeeper docker run -d --name zookeeper -p 2181 -t wurstmeister/zookeeper 第二步：拉取kafka镜像，并启动容器 docker pull wurstmeister/kafka docker run -d --name kafka --publish 9
docker安装kafka
terrybg
06-08 1万+
本文采用docker-compose安装kafka，kafka环境是建立在zookeeper之上，安装kafka之前先安装zookeeper。创建docker-compose 内容如下： 运行 查看运行容器 运行成功日志如下：kafka安装成功会在zookeeper生成数据。使用zk客户端工具zktool 或者 ZooInspector。本文使用ZooInspector，能够看到如下图就说明zk和kafka环境搭建成功。......
Docker安装kafka
靖妖傩舞
03-16 581
Kafka是依赖于Zookeeper，因此需要先部署好zookeeper，才能部署好kafka。
Kafka简明教程（一）基于Docker快速搭建测试环境
来啊 快活啊
03-30 1589
QuickStart 安装Docker和Compose 将docker-compose.yml中的KAFKA_ADVERTISED_HOST_NAME环境变量配置为Docker宿主机的IP地址 启动集群 $ docker-compose up 扩展多个Broker $ docker-compose scale kafka=2 启动zookeeper容器 sudo d...
docker极速搭建kafka 外网可以访问-已测试
jiangkai16001519的博客
10-25 7023
原文：https://blog.csdn.net/lblblblblzdx/article/details/80548294  docker极速搭建kafka，测试了其他很多资料  只有这个是外网可以访问的 1. 启动zookeeper容器 docker run -d --name zookeeper -p 2181:2181 -t wurstmeister/zookeeper  2. ...
docker 安装kafka
04-28
3. 创建Kafka的Docker容器，并指定相关参数，例如： ``` docker run -d \ -e KAFKA_ADVERTISED_HOST_NAME={your_host_ip} \ -e KAFKA_ZOOKEEPER_CONNECT={zookeeper_host}:2181 \ -e KAFKA_CREATE_TOPICS="test_...
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

林志鹏JAVA

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值