单节点kafka配置内外网同时访问

最新推荐文章于 2024-07-24 09:41:46 发布
最新推荐文章于 2024-07-24 09:41:46 发布
阅读量1.1k 收藏 4
点赞数
分类专栏： kakfa. 文章标签： kafka
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/fire_in_java/article/details/119939775
版权
本文介绍了如何在kafka_2.11-2.0.0单节点环境中，解决内外网应用连接kafka的问题。当内网服务器ip映射到外网时，需要修改特定配置以实现内外网同时访问。通过调整配置并重启kafka服务，可以确保内外网的顺利通信。
摘要由CSDN通过智能技术生成

今天有个项目网络分内外网，部署需要在内网部署数据库、kafka等内容，外网需要部署应用，突然发现在外网应用无法连接上kafka，但是内外网端口映射是通的，于是上网google了一下，由于我们内网映射到外网时内网服务器ip发生变化，发现需要修改如下配置即可实现内外网同时访问，我使用的kafka版本为kafka_2.11-2.0.0，使用的是单节点，配置如下：

#内网监听名称，这个在配置文件中没有需要添加
inter.broker.listener.name=INTERNAL
#内网监听规则，第一个是内网，第二个是外网，注意端口不一样，端口可以自己定义
listeners=INTERNAL://192.168.10.110:9092,EXTERNAL://192
最低0.47元/天 解锁文章
fire_in_java
关注
专栏目录
内外网分开访问AWS上kafka集群
qq_21961907的博客
05-17 581
aws上的服务是有内网ip和外网ip区分的。我们在aws内部环境运行程序需要指定内网ip，在外网访问时需要指定外网ip。但是broker是只能配置一个ip的，我们怎么做呢？ 首先要了解一下几个配置： host.name 已弃用。 仅当listeners属性未配置时被使用，已用listeners属性代替。表示broker的hostname advertised.host.name 已弃用。仅当a...
kafka 配置内网和外网同时可以连接
liangf05的专栏
12-02 4354
有时候想要外网生产，外网消耗，这个时候就想要配置kafka同时支持内网和外网同时可以访问： #内网监听名称，这个注释想要解开 inter.broker.listener.name=INTERNAL #内网监听规则，第一个是内网，第二个是外网，注意端口不一样，同时想要服务器入网打开9092和9094端口，端口可以自己定义 listeners=INTERNAL://172.17.1.0:9092,EXTERNAL://172.17.1.0:9094 #活动监听规则，或者说开放的规则，第一个是内网，第二个是外网，
Kafka配置内外网分流
最新发布
qq_54738879的博客
07-24 531
之前服务器一直有两块网卡，一块千兆网卡，一块万兆网卡。由于之前数据量不算大，所以直接使用了千兆网卡，并配置了外网映射。随着数据量增大，kafka集群内部通信时网络带宽一直居高不下，甚至将千兆网跑满，导致数据积压。这时候不得不配置内外网分流，将内网通信流量全部走万兆网卡，千兆网卡对外提供服务。：配置kafka认证协议，我们是用的SASL_PLAINTEXT。：kafka默认使用的监听地址，表示默认使用内网监听地址通信。连接kafka，由于kafka需要公网请求访问，所以。：配置内网和外网监听地址；
kafka配置_kafka配置内外网访问
weixin_39831039的博客
12-01 1814
最近公司需要在阿里云配置一个Kafka集群实现内网和外网均可访问，折腾了一下午才弄出来，其中遇到一些配置问题总结如下：listeners: 学名叫监听器，其实就是告诉外部连接者要通过什么协议访问指定主机名和端口开放的 Kafka 服务。advertised.listeners：和 listeners 相比多了个 advertised。Advertised 的含义表示宣称的、公布的，就是说这组监听器...
kafka 内外网分流(frp,云服务器)
qq_40448796的博客
11-11 1680
在本地虚拟机上通过docker部署kafka，云服务器通过frp进行内网穿透，外部通过访问云服务器公网ip来访问kafka和内部直接访问kafka容器访问kafka
kafka内网外网访问配置
热门推荐
LeonTom的博客
09-12 1万+
IP：  (请修改自己的ip地址)     内网：172.18.10.10               外网：120.78.22.22 1. 先在/etc/hosts文件中添加解析记录             172.18.10.10    HostName                 2. 修改 kafka_2.11-2.0.0/config    server.properties ...
kafka内网网同时访问配置
carcoon的专栏
02-19 2234
有3台kafka集群broker，以下ip地址均属杜撰，仅仅做举例用 hostname 内网ip 外网Ip kafka1 192.168.1.201 139.28.39.101 kafka2 192.168.1.202 139.28.39.102 kafka3 192.168.1.203 139.28.39.103 方法1 配置hosts方式 本来kafka集群配置的listener参数如下: # The address the socket server listens on.
kafka集群如何内外网均可访问
ccccccccc
12-27 1万+
有3台kafka集群broker，以下ip地址均属杜撰，仅仅做举例用 hostname 内网ip 外网Ip kafka1 10.0.0.1 139.0.0.1 kafka2 10.0.0.2 139.0.0.2 kafka3 10.0.0.3 139.0.0.3 本来kafka集群配置的listener参数如下: # The address the socket ser...
Kafka集群多用户访问权限分治和消息共享配置指导
企业实战系列集 ●●● https://ximenjianxue.blog.csdn.net
04-24 2906
这明显在生产环境，这种认证方式时不符合实际业务场景的。allow.everyone.if.no.acl.found=true #false的话就只能超级用户才能访问资源，true的话其他也可以，如果用户读写一个 Topic，但是没有配置 ACL 权限，客户端会报认证失败错误。现场业务由于多厂商集成，共享数据需要，需对接当前kafka集群，为做到类似租户隔离的功能，需要开启kafka的权限控制和动态用户管理功能，实现不同厂商访问被授权的合法资源，消费者账号只能消费数据，生产者账号只能生产数据。
docker部署kafka，外网可访问
he3more的博客
03-06 7397
1.拉取镜像 拉取zookeeper镜像 docker pull wurstmeister/zookeeper 拉取kafka镜像 docker pull wurstmeister/kafka 2. 启动容器 启动zookeeper docker run -d --name zookeeper -p 2181 :2181 -t wurstmeister/zookeeper 启动k...
kafka集群内外网分流方案——筑梦之路
筑梦之路
06-03 675
在现代分布式系统架构中，Kafka作为一款高性能的消息队列系统，广泛应用于大数据处理、实时流处理以及微服务间的异步通信场景。特别是往往企业级应用中，业务网段和内网通信网段不是同一个网段，内网的机器想要访问业务数据只能基于现有业务网卡的机器才能访问，此时想要kafka集群内外网都可以通信，即内网的走内网IP，外网的走外网ip，互不影响，同时，也要确保集群内部通信高效、安全，充分利用内网资源，避免不必要的外网流量消耗。
kafka配置公网IP访问
weixin_30697239的博客
02-25 2268
0.8版本有两个配置参数需要修改： advertised.host.name=171.220.211.158 #<==kafka开放到外网的IP advertised.port=10012 #<==9092映射到外网后的端口 最新版本0.10.x broker配置弃用了advertised.host.n...
Kafka实战篇-内外网分流实战&通信配置详解
S1124654的博客
04-18 422
Kafka实战篇-内外网分流实战&通信配置详解
实现 kafka 集群跨内外网访问
wy
07-20 1770
设置 Kafka 集群的内外网访问设置 # Listeners 是 Broker 监听的网卡IP # Kafka 的配置文件 server.properties 记录了 Zookeeper 集群各节点的访问地址 # 但是并未设置 *Broker 地址。Kafka 节点启动后向 Zookeeper 注册自己的同时也会从其中获取兄弟节点的地址实现节点间通信 # 同样，客户端连接 Kafka 后返回给它的是集群各节点的访问地址，该地址也是从上面的 Zookeeper 中获得的 # 这个地址就是 Kafka 节点
Kafka 内外网分流配置已验证
Geminates
03-03 967
2.消费数据直接消费端口1数据即可（./kafka-console-consumer.sh --bootstrap-server 内网IP:端口1 --topic xxx）方案1.部署服务器没有外网网卡，只能将ip和端口映射到外网 且映射的端口不一定是9092。1.这里上下两行是对应的内网使用端口1接受 外网转发进来的使用端口2接受。kafka 需要内外网访问分流，这里举例单机版，集群自行照例子配置。网上有很多方案但是ip地址的说明大多有问题，配置后无法使用。方案2.部署服务器有外网网卡。
Kafka——内外网访问的设置
我的博客
04-19 5350
外网访问kafka
单节点kafka 连接配置信息
09-27
单节点Kafka的连接配置信息如下： - broker.id：全局唯一标识，每个节点上需要设置不同的值 - listeners：设置为节点的IP地址 - log.dirs：存放Kafka消息的目录 - zookeeper.connect：配置Zookeeper的地址 在单节点...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

fire_in_java

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值