Centos环境使用Docker安装Kafka

1 Kafka简介
1、kafka是什么?
Kafka是一种高吞吐量的分布式发布订阅消息系统,它可以处理消费者规模的网站中的所有动作流数据,具有高性能、持久化、多副本备份、横向扩展能力。

2、kafka的工作原理[去耦合]
Kafka采用的是订阅-发布的模式,消费者主动的去kafka集群拉取消息,与producer相同的是,消费者在拉取消息的时候也是找leader去拉取。

3、kafka存在的意义:去耦合、异步、中间件的消息系统。

2 创建一个网络

# app-tier:网络名称
# –driver:网络类型为bridge

docker network create app-kafka --driver bridge

在这里插入图片描述

3 安装zookeeper

# Kafka依赖zookeeper所以先安装zookeeper
# -p:设置映射端口(默认2181)
# -d:后台启动

docker run -d --name zookeeper-server \
    -p 2181:2181 \
    --network app-kafka \
    -e ALLOW_ANONYMOUS_LOGIN=yes \
    bitnami/zookeeper:latest

在这里插入图片描述
查看zookeeper运行状态
在这里插入图片描述

4 安装Kafka

# 安装并运行Kafka,
# –name:容器名称
# -p:设置映射端口(默认9092 )
# -d:后台启动
# ALLOW_PLAINTEXT_LISTENER任何人可以访问
# KAFKA_CFG_ZOOKEEPER_CONNECT链接的zookeeper
# KAFKA_ADVERTISED_HOST_NAME当前主机IP或地址(重点:如果是服务器部署则配服务器IP或域名否则客户端监听消息会报地址错误)
# -e KAFKA_CFG_ADVERTISED_LISTENERS=PLAINTEXT://192.18.102.102:9092 这个IP一定要是外网IP,不要设置为内网IP

docker run -d --name kafka-server \
    --network app-kafka \
    -p 9092:9092 \
    -e ALLOW_PLAINTEXT_LISTENER=yes \
    -e KAFKA_CFG_ZOOKEEPER_CONNECT=zookeeper-server:2181 \
    -e KAFKA_CFG_ADVERTISED_LISTENERS=PLAINTEXT://192.18.102.102:9092 \
    bitnami/kafka:latest

在这里插入图片描述
查看kafka运行状态
在这里插入图片描述

5 kafka-map图形化管理工具

# 图形化管理工具
# 访问地址:http://服务器IP:9101/
# DEFAULT_USERNAME:默认账号admin
# DEFAULT_PASSWORD:默认密码admin
# Git 地址:https://github.com/dushixiang/kafka-# map/blob/master/README-zh_CN.md

docker run -d --name kafka-map \
    --network app-kafka \
    -p 9101:8080 \
    -v /opt/kafka-map/data:/usr/local/kafka-map/data \
    -e DEFAULT_USERNAME=admin \
    -e DEFAULT_PASSWORD=admin \
    --restart always dushixiang/kafka-map:latest

在这里插入图片描述
在这里插入图片描述

参考博客
centos环境使用Docker安装Kafka指南

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
要在CentOS使用Docker安装Kafka,请按照以下步骤进行操作: 1. 首先,您需要安装Docker。对于Windows系统,您可以安装Docker Desktop软件。您可以从官方网站下载纯净版的CentOS镜像。您可以在阿里云官方网站上找到需要的版本并进行下载。 2. 下载完CentOS镜像后,使用以下命令导入该镜像: ``` docker load -i centos.7.61810.tar ``` 3. 创建容器时,我们需要映射两个端口,即9092端口用于Kafka,2181端口用于Zookeeper。执行以下命令创建容器,其中【镜像ID】是刚刚导入的CentOS镜像的ID: ``` docker run -itd -p 9092:9092 -p 2181:2181 --privileged --name kafka-server-3.4.0 【镜像ID】 /usr/sbin/init ``` 4. 请注意,由于Docker Kafka版本不断迭代,不再建议使用localhost/127.0.0.1作为KAFKA_ADVERTISED_HOST_NAME。因此,您需要将KAFKA_ADVERTISED_HOST_NAME设置为您的IP地址。 5. 启动容器后,可以使用以下命令进入容器并验证Kafka是否正确安装: ``` docker exec -it kafka bash ``` 6. 如果容器启动后不久就自动退出,并且日志显示启动失败且指向的主机不可达,可能是由于防火墙的原因导致的。您可以通过执行以下命令关闭防火墙: ``` systemctl stop firewalld ``` 7. 如果关闭防火墙后重启容器失败,可能是由于关闭防火墙时清空了iptables表。您可以重建iptables来解决此问题。 8. 现在,您已经成功安装Kafka。您可以使用以下命令验证Kafka是否正确安装: ``` docker export -o kafka-server-3.4.0.tar 【容器ID】 ``` 请注意,这只是在CentOS使用Docker安装Kafka的一种方法。根据您的需求和环境,您可能需要进行适当的调整。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* *3* [使用centos搭建kafka服务器Docker](https://blog.csdn.net/nhx900317/article/details/130833181)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *2* [Docker搭建kafka](https://blog.csdn.net/qq_31728357/article/details/119297596)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值