生产环境端口转发：Kafka报错（服务器和客户端使用端口不同）

最新推荐文章于 2023-04-18 10:13:26 发布
最新推荐文章于 2023-04-18 10:13:26 发布
阅读量493 收藏
点赞数
分类专栏： 问题记录 文章标签： socat 端口转发 bootstrap.server 服务器配置 网络工具
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_18453581/article/details/119510980
版权

客户端bootstrap.server的配置要和服务器一致

  • ip在/etc/hosts配置映射
  • 端口用socat做转发

socat 端口转发

socat是一个多功能的网络工具，使用socat进行端口转发。

socat安装

yum install -y socat

 在本地监听12345端口，并将请求转发至192.168.172.131的22端口。

socat TCP4-LISTEN:12345,reuseaddr,fork TCP4:192.168.172.131:22

Zakza
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
kafka.clj：Kafka的Clojure客户端
01-31
- **配置管理**：允许开发者自定义Kafka连接参数，如服务器地址、端口、超时时间等。 - **命令行工具**：提供了命令行接口，方便进行快速测试和调试。 ### 4. CQRS（Command Query Responsibility Segregation） ...
kafka-rust：Apache Kafka的Rust客户端
02-05
- **发送和接收消息**：使用生产者的`send`方法发送消息，消费者则通过`fetch_messages`或`poll`方法获取新消息。 - **错误处理**：kafka-rust提供了丰富的错误类型，方便开发者捕获和处理可能出现的问题。 4. **...
Kafka 云服务器分别配置内外网访问
DraGon_HooRay的博客
01-11 3777
项目场景： 在 docker 部署或云服务器上部署，需要内外网分流的时候。 在Windows上连接阿里云服务器上部署的Kafka服务报错 问题描述： Idea中创建Consumer报错：java.lang.IllegalStateException: No entry found for connection 2147483609 解决方案： 方案一： 在客户端机器上修改hosts文件，配置上kafka所在服务器的hosts文件内的映射关系。这显然不是明智之举，不安全且麻烦。 方案二： 在公司内网部
kafka使用路由器做nat端口转发时 连接出错
sun_xuegang的博客
03-01 2337
1.网络结构 描述： 如下图所示 左侧机器(11.100.5.131)在使用kafka命令行访问172.10.220.1:9092查看消息时报错, 报错信息为： Connection to node -1 could not be established. Broker may not be available. (org.apache.kafka.clients.NetworkClient) 2.试错 (1)在kafka机器(36.7.242.42)上修改kafka配置 将listeners和advert
Kafka单机部署不同端口
程序员的成长之道
06-15 1670
Kafka单机部署不同端口1. Kafka修改默认端口9092 1. Kafka修改默认端口9092 端口号可以被任意修改。如果端口号设置为小于1024，那么kafka需要以root身份启动。修改kafka下的config文件夹下以下配置文件（如果是容器部署的kafka，需要进入容器同样修改）： 1、service.properties port = 9093 不指定的话，按照默认9092 2、connect-distributed.properties
kafka在云主机中的内外网访问问题
liu_jiapeng的博客
05-05 486
listeners 这个是kafka bind的端口 advertised.listeners 这个是kafka在zookeeper中注册的端口，用户客户端更新metadata 如果需要外网访问则需要配置 advertised.listeners， 但是如果配置一个则内外网都会用这个地址，浪费流量 网上有修改host的解决办法，但是会对客户端有侵入性。其实如果认真看了kafka的文档，是有办法解...
kafka内外网访问配置
热门推荐
飘然渡沧海的博客
03-09 1万+
kafka kafka里面两种监听配置 内网监听配置 listeners=PLAINTEXT://192.168.0.213:9092 配置完内网可以正常得去消费或者添加kfka数据 如果配置了advertised.listeners就无法正常访问消费 advertised.listeners=PLAINTEXT://101.89.163.1:9092 WARN [Consumer clientId=consumer-console-consumer-94880-1, groupId=consol
记一次kafka外网无法访问（结合frp内外网穿透）
bigdata_player
05-10 2147
一.起因 有个需求，需要将阿里云的kafka数据发送到某个内网环境，但是内网环境又没有一个对外的公网IP，怎么办呢？后来采用了frp内网穿透技术，使得阿里云服务器可以访问kafka，但是却发现发送了数据，内网接收不到...... 二.解决方案 1）外网服务器配置 1）hosts配置映射 # 配置映射 # ip为阿里云服务器的内网ip # k...
ruby-kafka：Apache Kafka的Ruby客户端库
02-02
目录安装将此行添加到您的应用程序的Gemfile中： gem 'ruby-kafka' 然后执行： $ bundle或自己安装为： $ gem install ruby-kafka兼容性生产者API 消费者API 卡夫卡0.8 v0.4.x中的全面支持不支援卡夫卡0.9 v0.4.x中...
kafka-python：Apache Kafka的Python客户端
02-05
在Python编程环境中，`kafka-python`是与Kafka进行交互的主要库，它为Python开发者提供了方便的API来生产、消费和管理Kafka主题。 **一、安装与设置** 在Python环境中，你可以通过pip来安装`kafka-python`库： ```...
kafka-tunnel:通过ssh隧道访问AWS云中的kafkazookeeper以使用和产生消息
05-04
kafkatunnel.py 通过ssh隧道访问kafka / zookeeper，以使用和生成本地计算机上的消息 要求 您需要python3才能使用kafkatunnel.py python3 点3 注意：对于AWS模式：您需要使用Name = kafka / zookeeper标记ec2 zookeeper和kafka实例 参见 安装 $ git clone https://github.com/simple-machines/kafka-tunnel $ make 用法 kafkatool.py支持两种传递远程Zookeeper / kafka以及模式注册表IP的方式： 通过ec2资源标签自动检索（名称= zookeeper / kafka） $ kafkatunnel aws ec2-user@awsjumphost 手动传递您的远程Zookeeper / kafka
RdKafka::KafkaConsumer使用实例
08-11
RdKafka是一个高效的C/C++ Kafka客户端，它提供了生产者和消费者API，使得与Kafka集群进行交互变得更加简单。在这个简化的使用实例中，我们不仅会了解基本的消费流程，还会看到如何获取服务器状态并根据这些信息来...
Linux下启动Kafka集群无响应(解决)
chaojiyingxiong的博客
03-14 4523
kafka启动，zookeeper启动，连接超时
kafka外网连接不通，内网可连接问题
pioneer的博客
07-26 4462
默认配置为： #listeners=PLAINTEXT://:9092 #advertised.listeners=PLAINTEXT://your.host.name:9092 zookeeper.connect=localhost:2181 本机命令行测试没有任何问题，但是我用java连接服务器发现没有任何反应 经过网上查资料发现外网默认是访问不到的 #listeners=...
Kafka如何配置内外网多ip访问
m0_66705151的博客
03-21 5884
Kafka如何配置内外网多ip访问
kafka安装配置(包含内外网设置)
最新发布
完颜振江
04-18 1529
kafka安装配置(包含内外网设置)
Kafka跨网闸，使用映射地址无法连接
ThePromonkeyOf_HeLuo的博客
04-02 2822
作者：半兽人 链接：https://www.orchome.com/1903 很多人都因为配置 kafka 外网转发而困扰，我这里统一讲一下原理和原因。 场景假设 比如你有一个 kafka 集群，在阿里云上，该集群有 2 个 broker，A 和 B。 kafka 集群： A 内网：172.10.0.2 外网：10.0.21.1 B 内网：172.10.0.1 外网：10.0.21.2 serve...
kafka内外网访问配置问题及解决
like_java_的博客
08-18 2565
1.kafka在远程服务器安装，成功启动，正常测试消息发布，消费。 配置： listeners=PLAINTEXT://localhost:9092 zookeeper.connect=localhost:2181 2.使用springboot进行kafka整合，此时使用外网ip连接，报错： Connection to node 0 could not be established. Broker may not be available. 3.修改kafka的配置文件 #liste
Linux部署Kafka及常见问题记录
jaylee的博客
01-20 2301
（物理上不同Topic的消息分开存储，逻辑上一个Topic的消息虽然保存于一个或多个broker上但用户只需指定消息的Topic即可生产或消费数据而不必关心数据存于何处）kafka消息发送的时候 ,考虑到性能 可以采用打包方式发送， 也就是说 传统的消息是一条一条发送， 现在可以先把需要发送的消息缓存在客户端， 等到达一定数值时， 再一起打包发送， 而且还可以对发送的数据进行压缩处理，减少在数据传输时的开销。topic命令时的警告 创建topic的时候，如果名称中包含. 或者_，kafka会抛出警告。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值