Kafka启动不成功日志报错

最新推荐文章于 2024-09-15 19:46:31 发布
最新推荐文章于 2024-09-15 19:46:31 发布
阅读量4.7k 收藏 7
点赞数 1
分类专栏： ThingsBoard物联网开源平台 文章标签： java 开发语言
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_50688830/article/details/126636737
版权
Kafka启动时遇到错误并非SASL认证问题，而是端口配置与Zookeeper的关联。启动流程需首先启动Zookeeper，并确保在宝塔防火墙中开放Zookeeper的随机端口。在启动Kafka前，需修改配置文件中的私网IP地址，并在启动后开放9092端口，以避免连接失败。这个问题花费了两天时间排查，最终发现每次Zookeeper重启端口都会改变，需及时更新防火墙设置。
摘要由CSDN通过智能技术生成

INFO Opening socket connection to server 156.23.99.22/156.23.99.22:2181. Will not attempt to authenticate using SASL 

我以为是SASL认证的问题，经过2天的坑，发现是端口的问题。

在启动kafka之前要先启动zookeeper

1.启动zookeeper命令

./usr/local/zookeeper/zookeeper-3.3.6/bin/zkServer.sh start

2.启动好之后查看zookeeper端口号

netstat -ntlp

3. 启动zookeeper时，会出现3个PID一样，这3个每次启动zookeeper时会变端口号，要去宝塔防火墙去开放对应这三个的端口号

最低0.47元/天 解锁文章
Wassio~
关注
专栏目录
kafka启动成功之后，jps过一会不显示进程的解决方法
码农研究僧的博客
08-24 2851
最主要是kafka异常关闭，会把之前的未关闭的id记录在meta.properties文件中，重新启动会显示当前id与文件id不同，导致程序无法执行，kafka无法启动。修改meta.properties的配置文件，将其内部的cluster.id修改为对应报错日志提示的id，我的具体如下：Hf69pUKBS9uhtVVKxhlpMQ。启动zookeeper之后在启动kafka，通过jps显示kafka还在，但是过了几秒之后，发现kafka不在了，那就是kafka启动不成功。即可成功显示kafka的进程。
超好用的Kafka集群启动，关闭脚本
01-20
之前介绍过Kafka集群环境的搭建，但是细心的朋友们都发现，Kafka与ZooKeeper一样，都需要在每台节点上执行对应的开启/关闭脚本，十分的不方便。现在我们学习只用到了3台节点，如果以后到了企业，节点多了我们肯定就...
kafka启动报错
一般社员的博客
10-14 2596
具体的报错日志可以去 /home/kafka_2.13-3.3.1/hs_err_pid23538.log查看。进入kafka安装目录下的bin目录修改kafka-server-start.sh。同理把bin目录下的zookeeper启动文件也改一下。
Kafka服务端日志详解
qq_44027353的博客
08-10 2134
进入到上方配置文件中指定的目录下查看，topic的数据都是以topic名 + partition下标的命名方式保存的我们现在进入其中一个partition目录.index日志索引文件，采用的稀疏索引提高查询效率，记录的是消息偏移量offset 和 该消息在.log文件中的位置position.log消息保存在.log文件中，是以二进制的方式保存的。可以通过.index和.timeindex两个索引文件加速查找消息。
kafka无法启动
Drippy_le的博客
03-08 2827
Configured broker.id 1 doesn't match stored broker.id 0 in meta.properties.
kafka 启动无反应的一个原因及解决
MuMeiaa的博客
10-29 4108
kafka启动命令无反应问题
Kafka常见错误及解决办法
yiweiyi329的博客
09-24 4万+
1、报错信息： org.apache.kafka.clients.consumer.OffsetOutOfRangeException: Offsets out of range with no configured reset policy for partitions: {qukan_log_v3-198=2289560518} 报错原因：当消费者消费offset大于或小于当前kafka集...
java基于spark streaming和kafka，hbase的日志统计分析系统.rar
10-19
在现代大数据处理领域，Java、Kafka、Spark和HBase是四大关键组件，它们共同构建了一个高效、实时的日志统计分析系统。这个系统利用这些工具的特性，实现了从数据采集到处理再到存储的完整流程。 首先，Kafka是...
kafka跟storm收集日志解决方案
01-12
### Kafka与Storm在日志收集解决方案中的应用 #### 一、Kafka简介及安装 Apache Kafka是一种分布式的、基于发布/订阅模式的消息系统，它能够处理大量的实时数据流。Kafka因其高性能、高吞吐量以及低延迟等特点，在...
spark通过kafka-appender指定日志输出到kafka引发的死锁问题
10-15
2. **日志输出延迟**：由于`kafka.appender.kafka.syncSend=false`，意味着使用异步发送模式，如果Kafka处理日志的速度跟不上Spark产生的速度，可能导致日志积压，从而影响Spark作业的启动。 3. **网络阻塞**：Spark...
EFK+kafka+head日志分析集群部署.rar
07-04
日志分析集群，在本地centos7虚拟机搭建的Es+firebeat+logstash+kibana+kafka+head的完整集群部署文档，很详细，通常的EFK日志分析，加上kafka的消息队列，可以处理PB级别的日志内容。
kafka的启动失败
热门推荐
TonG_L的博客
05-25 4万+
在学习搭建单机kafka的时候遇到kafka不能启动的错误。 在zookeeper可以正常running的前提下，启动kafka： bin/kafka-server-start.sh config/server.properties 结果启动失败，报如下错误： [2021-05-25 07:26:14,355] INFO Opening socket connection to server localhost/127.0.0.1:2191. Will not attempt to authenticat
启动zookeeper和kafka时 kafka无法启动或者闪退
sis12e的博客
04-11 6247
kafka无法启动或者kafka启动以后 kafka进程自动挂掉 查看kafka日志位置 server.properties 我的路径是/opt/module/kafka/config/server.properties)第59行就是kafka日志的默认位置datas下的文件全部删除查看zookeeper日志位置 我的路径是/opt/module/zookeeper/conf/zoo.cfg第12行就是zookeeper的默认日志位置删除zkData下的所有文件。
【无标题】kafka启动失败
weixin_42024705的博客
03-16 436
随便写了/etc/hosts/，kafka就启动成功了。2.server.x与myid文件对应出错。1.zookeeper配置文件写错。
kafka server起不来
czqbaifnxkj的博客
06-29 1671
反正就是怎么操作导致跟/tmp/kafka-logs/meta.properties 里面的不一致，删了meta.properties重启即可。查看日志报错 Exiting Kafka due to fatal exception during startup.2、 卸载kafka时，残留下（已过时）的节点信息，未清除。启动顺序是先启动zookeeper再启动kafka。关闭顺序是先关闭kafka再关闭zookeeper。1、 关闭集群时是直接关机，或是没按正常流程关闭。
kafka启动失败
wsyzxss的博客
11-23 7549
ERROR Fatal error during KafkaServer startup. Prepare to shutdown (kafka.server.KafkaServer) kafka.common.InconsistentClusterIdException: The Cluster ID 1m798TADRZerLuFBGDS9mw doesn't match stored clusterId Some(8XlbKFlXSE2hSzZ6OX_Rqg) in meta.properties.
kafka操作2
weixin_51343683的博客
10-17 2943
Topic是逻辑上的概念，而partition是物理上的概念，每个partition对应于一个log文件，该log文件中存储的就是Producer生产的数据。压缩后的offset可能是不连续的，比如上图中没有6，当从这些offset消费消息时，将会拿到比这个offset打的offset对应的消息，实机上会拿到offset为7的消息，并从这个位置开始消费。在生产环境中，每台服务器的配置和性能不一致，但是kafka只会根据自己的代码规则创建对应的分区副本，就会导致个别服务器的存储压力较大。
Kafka安装后无法启动问题
Freesia_0705的博客
04-17 721
ERROR Fatal error during KafkaServer startup. Prepare to shutdown (kafka.server.KafkaServer) kafka.common.InconsistentBrokerIdException: Configured broker.id 1 doesn't match stored broker.id 0 in meta.properties. If you moved your data, make sure your conf
Java企业面试题3
最新发布
m0_74972727的博客
09-15 891
1. break和continue的作用(智*图) break：用于完全退出一个循环（如 for, while）或一个 switch 语句。当在循环体内遇到break语句时，程序会立即跳出当前循环体，继续执行循环之后的代码。 continue：用于跳过当前循环体中剩余的部分，并开始下一次循环。如果是在 for 循环中使用continue，则会直接进行条件判断以决定是否执行下一轮循环。 2. if分支语句和switch分支语句的异同之处(智*图) 相同点：都是用来根据不同的条件执行不同的代码块。
kafka启动不了，没有报错
03-31
如果Kafka没有报错但是无法启动，可能有以下几种原因： 1. 端口被占用：Kafka默认使用9092端口，如果该端口被其他进程占用，Kafka就无法启动。可以使用`netstat -ano | grep 9092`命令查看是否有进程占用该端口，...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值