公网与内网IP映射的kafka配置

最新推荐文章于 2024-09-09 17:07:50 发布

wc188996

最新推荐文章于 2024-09-09 17:07:50 发布

阅读量6.3k

点赞数

公司的公网IP和内网IP是映射的，端口也是映射的，搭建kafka公网的测试环境是折腾了一段时间，生产者通过公网将消息发送到内网。

1、/etc/hosts里配置内网IP

内网IP 主机名

2、主要配置kafka/config/server.properties

打开listeners的注释，改为

listeners=PLAINTEXT://0.0.0.0:kafka端口

打开advertised.listeners的注释，改为

advertised.listeners=PLAINTEXT://外网IP:外网端口

添加一项：

advertised.host.name=主机名

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

wc188996

关注关注

0
点赞
踩
3

收藏

觉得还不错? 一键收藏
4
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

kafka内网网同时访问配置

carcoon的专栏

02-19

2261

有3台kafka集群broker，以下ip地址均属杜撰，仅仅做举例用 hostname 内网ip 外网Ip kafka1 192.168.1.201 139.28.39.101 kafka2 192.168.1.202 139.28.39.102 kafka3 192.168.1.203 139.28.39.103 方法1 配置hosts方式本来kafka集群配置的listener参数如下: # The address the socket server listens on.

单节点kafka配置内外网同时访问

fire_in_java的专栏

08-26

1165

今天有个项目网络分内外网，部署需要在内网部署数据库、kafka等内容，外网需要部署应用，突然发现在外网应用无法连接上kafka，但是内外网端口映射是通的，于是上网google了一下，由于我们内网映射到外网时内网服务器ip发生变化，发现需要修改如下配置即可实现内外网同时访问，我使用的kafka版本为kafka_2.11-2.0.0，使用的是单节点，配置如下： #内网监听名称，这个在配置文件中没有需要添加 inter.broker.listener.name=INTERNAL #内网监听规则，第一个是内网，第二

4 条评论您还未登录，请先登录后发表或查看评论

kafka外网映射公司有公网ip kafka外网访问 kafka外网配置

hncdyj的专栏

05-10

5803

前提条件：由于公司要和第三方对接，采用kafka对接数据，传输用SSL加密。环境配置：内网三台机器：192.168.1.55，192.168.1.56，192.168.1.57 全部绑定内网的静态ip。由于公司有几个外网ip，故而做了如下映射：开始进入kafka，配置如下：其实外网映射靠的配置只有一个： listeners=SASL_SSL://192.168.1...

讨论：无法访问不同网段的Kafka问题

最新发布

KimmKing的技术博客

09-09

653

X同学：A网段的机器，访问B网段部署的Kafka集群，中间做了网络映射，映射成A网段可以访问的IP地址，A网段程序里配置bootstrap.servers就是这些可以访问的地址。然后我们发现B在一个集群里，还有一个节点C IP为10.1.2.103，A请求B后，会拿到这个C的信息，也就是10.1.2.103，然后发起访问。这时候我们会发现A是无法访问C的，而且上面的办法也不能对C来使用，因为C的IP地址是B给的。这个问题的本质是，redis/kafka 集群不是被设计成跨不同的网络访问区来使用的。

Kafka公网访问

real向往的博客

01-08

2269

Kafka内外网访问

kafka记录地址映射

小屁孩的博客

08-22

328

保存如下 Error connecting to node 93 at hadoop03:9092: 修改C:\Windows\System32\drivers\etc hosts文件 192.168.1.151 hadoop01添加映射如果保存时提示没有足够权限，则先暂时保存在桌面上，然后将.txt后缀名去掉，再从桌面上移到原文件夹，替换原文件在弹出界面...

容器环境下IP跨网闸映射kafka部署

weixin_38932035的博客

04-06

1634

一、 listeners 和 advertised.listeners 在公司内网部署 kafka 集群只需要用到 listeners，内外网需要作区分时才需要用到advertised.listeners。 listeners: 学名叫监听器，其实就是告诉外部连接者要通过什么协议访问指定主机名和端口开放的 Kafka 服务。我们要监听的uri的逗号分隔列表和监听器名称。指定hostname为0.0.0.0绑定所有接口。hostname为空以绑定到默认接口(JVM拿到的本机的hostname，java.ne

记录docker下kafka公网端口映射访问

YEXIHU的专栏

09-25

1761

需求公司内网kafka需要外部访问，通过外网端口映射到kakfa内网某个端口软件 docker下部署的kafka，使用镜像为：confluentinc/cp-kafka 网络： #mermaid-svg-851N6yRTjudSJSvO .label{font-family:'trebuchet ms', verdana, arial;font-family:var(--mermaid-font-family);fill:#333;color:#333}#mermaid-svg-851N6yRTjudS

Kafka集群多用户访问权限分治和消息共享配置指导

企业实战系列集 ●●● https://ximenjianxue.blog.csdn.net

04-24

2966

这明显在生产环境，这种认证方式时不符合实际业务场景的。allow.everyone.if.no.acl.found=true #false的话就只能超级用户才能访问资源，true的话其他也可以，如果用户读写一个 Topic，但是没有配置 ACL 权限，客户端会报认证失败错误。现场业务由于多厂商集成，共享数据需要，需对接当前kafka集群，为做到类似租户隔离的功能，需要开启kafka的权限控制和动态用户管理功能，实现不同厂商访问被授权的合法资源，消费者账号只能消费数据，生产者账号只能生产数据。

kafka2.4.0（0.10.0 以上）配置多ip监听

Mr.Zheng的博客

01-15

4095

前言与第三方数据同步，约定使用kafka作为接收数据的中间件，但是之前配置有问题，所以导致外网无法向我们集群生产数据（我们的集群有公网网卡，对外暴露了指定的端口），后来查了很多资料才知道，需要做一些配置，下面我将配置要点贴下面。配置方法找到kafka的server.properties进行修改红色部分绑定该节点的内网ip加端口号 listeners=PLAINTEXT://hostname:port 绿色部分绑定该节点的外网ip加端口号 advertised.listeners=PLAINT

kafka内外网连接问题

story-xu的博客

03-01

3188

部署kafka之后，发现只能被内网访问，或者配置外网之后，影响内网访问，本文介绍两种方式解决这个内外网同时访问的问题。

如何在阿里云服务器上配置部署kafka

DreamsArchitects的博客

08-31

5016

在云服务器上配置部署kafka和zookeeper一、介绍二、打开防护墙端口2181、9092三、打开云服务器的端口四、修改Kafka的配置文件一、介绍同样将压缩包通过ssh工具上传到我们的云服务器上，解压即可。 zookeeper的配置是和本地服务器配置是一样的，具体请参考这篇文章CentOS7安装部署kafka和zookeeper，但是不同的是kafka的配置文件的修改。二、打开防护墙端口2181、9092 firewall-cmd --zone=public --add-port=2181/tc

kafka消费者和生产者为内/外网映射情况的配置

wsyyyyy的博客

07-18

1425

IP：(请修改自己的ip地址) 内网：172.18.10.10 外网：120.78.22.22 1.先在/etc/hosts文件中添加解析记录 172.18.10.10HostName 2.修改 kafka_2.11-2.0.0/configserver.properties...

Kafka跨网闸，使用映射地址无法连接

ThePromonkeyOf_HeLuo的博客

04-02

3019

作者：半兽人链接：https://www.orchome.com/1903 很多人都因为配置 kafka 外网转发而困扰，我这里统一讲一下原理和原因。场景假设比如你有一个 kafka 集群，在阿里云上，该集群有 2 个 broker，A 和 B。 kafka 集群： A 内网：172.10.0.2 外网：10.0.21.1 B 内网：172.10.0.1 外网：10.0.21.2 serve...

记一次内网kafka映射到外网端口遇到小问题

chen_ke_hao的博客

07-04

6148

公司要将数据分享给第三方使用，所以要运维再内网搭建一单节点的kafka做消息中间件，kafka搭建好后，生产者生产数据正常，将kafka的9092端口映射到外网的9092端口，但是无法消费数据，会卡住，解决方法是 1先检查主机名，主机名要与hosts文件里的一至 2再检查advertised.listeners=PLAINTEXT://shzl-mq-2:9092，这里的要填主机名，如果是...

本地 idea 连接操作服务器上的 kafka，配置内外网映射

jojo_oulaoula的博客

12-12

1148

在 Kafka 的安装目录中的 config/server.properties文件中。172.25.38.169 是内网地址，39.106.91.145 是外网地址。注释掉原来的advertised.listeners 和 listeners。添加以下内容，将下面内容中的 IP 和端口号改成自己对应的。主要就是内外网映射的配置。

kafka 内网外网映射问题

Lbg_007的博客

11-06

679

原因：kafka 返回的是 listeners=PLAINTEXT://192.168.1.10:9092 的地址，外部公司访问不到公司内部的地址。解决方案： listeners 配置一个域名，外部公司的系统的服务器配置该域名到公网的映射规则，另外公网映射的时候，端口也要一致，不然有问题。背景：公司内部 kafka 要与外部单位的系统通过公网联调，公司运维做了映射后网络还是不通。

消息中间件之二：kafka详解

企业实战系列集 ●●● https://ximenjianxue.blog.csdn.net

09-02

709

概述 Kafka是一种分布式的，基于发布/订阅的消息系统。整理中……

kafka服务器端口映射,图kafka主机端口映射

weixin_28523493的博客

07-31

873

我想使用fig与卡夫卡来管理kafka集群。图kafka主机端口映射我是无花果的初学者，我有一个hostPort映射问题。我使用kafka-docker作为kafka图像。我的无花果是这里：zookeeper:image: jplock/zookeeper:3.4.6ports:- "2181"kafka:image: wurstmeister/kafka:0.8.1.1-1ports:- "90...

转载：kafka通过外网映射无法访问

weixin_41645232的博客

06-22

669

百度结果： https://www.orchome.com/1903 https://www.pianshen.com/article/81081973468/ https://segmentfault.com/a/1190000020715650