kafka启动报错：org.apache.kafka.common.KafkaException: Found directory /home/chenpeichao/bigdata/project/

最新推荐文章于 2024-07-01 11:13:57 发布
最新推荐文章于 2024-07-01 11:13:57 发布
阅读量1.8k 收藏
点赞数 1
分类专栏： kafka 文章标签： kafka启动报错
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u013083576/article/details/103925659
版权

当启动kafka服务时报错：org.apache.kafka.common.KafkaException: Found directory /home/bigdata/project/kafka/logs, 'logs' is not in the form of topic-partition or topic-partition.uniqueId-delete (if marked for deletion).

解决方案：启动命令里面添加覆盖日志输出目录

kafka-server-start.sh -daemon ./config/server.properties --override log.dirs=/home/bigdata/project/kafka/logs

民谊玉超
关注
专栏目录
org.apache.kafka.common.KafkaException: Socket server failed to bind to 114.115.20.100:9092: Cannot
风水道人
07-29 2万+
[2021-07-29 21:41:11,542] INFO Logs loading complete in 282 ms. (kafka.log.LogManager) [2021-07-29 21:41:11,552] INFO Starting log cleanup with a period of 300000 ms. (kafka.log.LogManager) [2021-07-29 21:41:11,553] INFO Starting log flusher with a defaul.
org.apache.kafka.common.KafkaException: Failed to acquire lock on file .lock in /home/hadoop/log/
大门的博客
10-26 2248
一次启动卡夫卡服务的时候，报了org.apache.kafka.common.KafkaException: Failed to acquire lock on file .lock in /home/hadoop/log/kafka-logs. A Kafka instance in another process or thread is using this directory.这个错 or...
记一次kafka使用不当导致的服务器异常
最新发布
ffyyhh995511的专栏
07-01 903
记一次kafka使用不当导致的服务器异常
Caused by: org.apache.kafka.common.KafkaException: Failed to construct kafka consumer
weixin_36585549的博客
11-03 7786
遇到的问题 kafka使用kerberos安全认证后，我这边的消费程序需要修改。原本如果是普通的消费程序，加两行代码就行了： System.setProperty("java.security.auth.login.config", kafkaJaasPath); System.setProperty("java.security.krb5.conf", krb5Path); 但是我的程序是用spark streaming框架写的。原本在我的idea上跑local跑的好好的，结果一上到spark st
org.apache.kafka.common.KafkaException: Invalid partition given with record: 1 is not in the range
mainlife23的博客
12-16 2153
问题描述：kafka中生产的消息超出分区 异常：Exception in thread “main” org.apache.kafka.common.KafkaException: Invalid partition given with record: 1 is not in the range [0…1). at org.apache.kafka.clients.producer.KafkaProducer.waitOnMetadata(KafkaProducer.java:908) at org.ap
kafka报错nested exception is org.apache.kafka.common.errors.RecordTooLargeException
热门推荐
qq_38814164的博客
12-25 6万+
【代码】kafka报错nested exception is org.apache.kafka.common.errors.RecordTooLargeException。
六（1）、spark遇到的问题
Angular_need的博客
04-12 4271
1、意外退出spark-shell，而不是quit，然后再输入spark-shell命令的时候，报错： 19/04/11 13:42:32 WARN util.Utils: Service 'SparkUI' could not bind on port 4040. Attempting port 4041. jps查看，SparkSubmit在，查看4040端口也是被SparkSubmit占用...
大数据最佳实践-kafka
program哲学
04-16 6085
kafka各个重难点大全，超详细
flink流处理
weixin_43705952的博客
12-07 1906
<?xml version="1.0" encoding="UTF-8"?> -<project xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 http://maven.apache.org/xsd/maven-4.0.0.xsd" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xmlns="http://maven.apache.org/POM/4.0.0"&gt
Apache大数据相关组件部署
L, there!
05-26 2439
组件总览 Zookeeper部署 创建目录 解压 环境变量 配置服务器编号 配置 同步 启动 Hadoop部署 解压 环境变量 创建目录 集群配置 core-site.xml hdfs-site.xml mapred-site.xml yarn-site.xml workers 启动 初始化zkfc 启动集..
Ambari2.7.5源码编译安装及遇到的问题解决有这一篇文章就够了
mcj1314bb的博客
01-26 1732
本篇博客列举的所有命令行操作及问题大部分是真实遇到的，还有部分没有遇到，其他博主遇到了也总结到这个博客下，在此贴出前几位博主的链接，也都是大神，希望大家多多支持 如操作过程中遇到什么疑问,或文章内容有什么不严谨的地方 请在评论区留言指出,我会第一时间更正 参考链接 https://xuemengran.blog.csdn.net/article/details/108626421 https://www.cnblogs.com/wang--lei/p/8257238.html https://www
'data' is not in the form of topic-partition or topic-partition.uniqueId-delete .
gongel coder
07-26 2231
Q:kafka.common.KafkaException: Found directory /usr/local/kafka_2.11-1.1.0/kafka-logs/data, 'data' is not in the form of topic-partition or topic-partition.uniqueId-delete (if marked for deletion). Ka...
kafka.common.KafkaException: Failed to acquire lock on file .lock in /tmp/kafka-logs. A Kafka instan...
weixin_34388207的博客
05-22 460
1、刚才未启动zookeeper集群的时候，直接启动kafka脚本程序，kafka报错了，但是进程号启动起来来，再次启动出现如下所示的问题，这里先将进程号杀死，再启动脚本程序。 1 [hadoop@slaver1 script_hadoop]$ kafka-start.sh 2 start kafkaServer... 3 [2018-05-22 09:37:26,926]...
KafkaException
arbalest1080的博客
09-27 67
flink-connector-kafka自带kafka-clients 引入 kafka-client需要排除 自带的kafk-client。
kafka 反序列化异常：org.apache.kafka.common.errors.SerializationException
Crystalqy的博客
07-06 2万+
Spring boot集成kafka时候，能够正常发送消息，但是接受消息时，报错org.apache.kafka.common.errors.SerializationException，提示序列化错误(自定义的消息对象不在kafka信任的包路径下) org.apache.kafka.common.errors.SerializationException: Error deserializ...
kafka日志文件命名问题
remakeprogramer的博客
07-03 550
kafka日志
Caused by: org.apache.kafka.common.KafkaException: org.codehaus.jackson.map.deser.std.StringDeserial
weixin_44100470的博客
03-12 1724
Springboot搭建kafka和spark出现的Bug总览 Caused by: org.apache.kafka.common.KafkaException: org.codehaus.jackson.map.deser.std.StringDeserializer is not an instance of org.apache.kafka.common.serialization.Deserializer org.codehaus.jackson.map.deser.std.StringDeser
kafka 异常：org.apache.kafka.common.errors.UnknownTopicOrPartitionException: This server does not host
hugo_lei的博客
05-06 1万+
org.apache.kafka.common.errors.UnknownTopicOrPartitionException: This server does not host this topic-partition。 producer 向一个之前不存在的 topic 写数据，因此时 topic 正在创建中 producer 就发送了数据，因此 topic 不存在。这是一个可重试异常，也既等一会再发送数据就可以了，因此 producer 需要加入重试 retry 逻辑。
kafka技术相关记录
AUASOFT的博客
05-25 594
1.kafka日志设置 “xxxlog" is not in the form of topic-partition or topic-partition.uniqueId-delete 提示以上错误，主要原因与zk的日志路径相同了； 2.启动命令 tar -xzf kafka_2.12-2.0.0.tgz 启动ZK:.\bin\windows\zookeeper-server-star...
kafka报错： org.apache.kafka.requests.IsolationLevel
05-24
这个报错通常是因为你的 Kafka 客户端使用了不支持的隔离级别。Kafka 支持的隔离级别包括读未提交（read_uncommitted）和读已提交（read_committed），默认为读未提交。如果你指定了一个不支持的隔离级别，就会出现这个报错。 你可以检查一下你的代码，看看是否在创建 Kafka 消费者或生产者时指定了一个不支持的隔离级别。如果有，将其修改为支持的隔离级别即可。如果没有指定隔离级别，可以尝试显式地指定一个支持的隔离级别，如下所示： ```java Properties props = new Properties(); props.put("bootstrap.servers", "localhost:9092"); props.put("group.id", "test-group"); props.put("key.deserializer", "org.apache.kafka.common.serialization.StringDeserializer"); props.put("value.deserializer", "org.apache.kafka.common.serialization.StringDeserializer"); props.put("isolation.level", "read_uncommitted"); // 显式指定隔离级别 KafkaConsumer<String, String> consumer = new KafkaConsumer<>(props); ``` 如果还有问题，可以提供更多的报错信息和代码细节，我会尽力帮助你解决问题。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值