kafka 0.11x 启动30秒后自动停止，报【另一个程序正在使用此文件，进程无法访问】

最新推荐文章于 2024-07-10 10:35:53 发布
最新推荐文章于 2024-07-10 10:35:53 发布
阅读量4.7k 收藏
点赞数 1
分类专栏： 编程 系统管理 文章标签： kafka
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/shenyue_sam/article/details/80595660
版权
在Windows 7 64位系统上，使用kafka_2.11-1.1.0和Java 8时，遇到启动后30秒因文件占用自动停止的问题。日志显示，log清理线程在尝试改名时失败，即使禁用log清洁器(log.cleaner.enable=false)也无法避免。解决方案包括手动删除日志文件（导致消息丢失）或设置log.retention.hours=168000以防止日志过早过期。
摘要由CSDN通过智能技术生成

环境：kafka_2.11-1.1.0，win7_64，java8

现象：
启动30秒后自动停止，报【另一个程序正在使用此文件，进程无法访问】

[2018-06-06 14:32:46,784] INFO [Log partition=myTopic-0, dir=D:\kafka_2.11-1.1.0\kafka-logs] Scheduling log segment [bas
eOffset 0, size 1599] for deletion. (kafka.log.Log)
[2018-06-06 14:32:46,800] ERROR Error while deleting segments for myTopic-0 in dir D:\kafka_2.11-1.1.0\kafka-logs (kafka
.server.LogDirFailureChannel)
java.nio.file.FileSystemException: D:\kafka_2.11-1.1.0\kafka-logs\myTopic-0\00000000000000000000.log -> D:\kafka_2.11-1.
1.0\kafka-logs\myTopic-0\00000000000000000000.log.deleted: 另一个程序正在使用此文件，进程无法访问。

        at sun.nio.fs.WindowsException.translateToIOException(WindowsException.java:86)
        at sun.nio.fs.WindowsException.rethrowAsIOException(WindowsException.java:97)
        at sun.nio.fs.WindowsFileCopy.move(WindowsFileCopy.java:387)
        at sun.nio.fs.WindowsFileSystemProvider.move
最低0.47元/天 解锁文章
Sy9876
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
kafka_2.12-2.3.0-SNAPSHOT.tgz 解决windows环境自动退出问题
06-11
我在windows环境下使用kafka进程出现进程占用问题，这个文件是添加补丁过后的版本，测试过在windows环境下不会自动退出，大家可以试试看
kafka进程总是在启动一段时间后自动停止
weixin_33737134的博客
03-03 5462
解决办法： bin/kafka-server-start.sh -daemon ./config/server.properties 进行启动，到现在为止 kafka 还在正常运行。和不加 -daemon 区别在于： bin/kafka-run-class.sh # Launch mode if [ "x$DAEMON_MODE" = "xtrue" ]; then #加 daemon 会使...
在windows中使用kafka出现: 另一个程序正在使用此文件
最新发布
m0_73535888的博客
07-10 261
C:\kafka\tmp\kafka-logs\__consumer_offsets-12\00000000000000000000.timeindex.cleaned: 另一个程序正在使用此文件，进程无法访问。kafka日志清理策略触发，在window环境下，在打开需要清理的日志的同时，如果是在 “生产环境” 中是非常不合理的 具体解决方法请参考。进入到我们的windows中的kafka文件的tmp中。在测试环境中删除掉无所谓 重新启动服务后会进行自动生成。导致这个问题的原因是。
kafka启动一段时候后自动停止
青年IT男
06-20 3330
使用守护进程方式启动 bin/kafka-server-start.sh -daemon ./config/server.properties  &
java进程运行一段时间停止_kafka总是在启动一段时间后自动停止
weixin_42515181的博客
03-05 596
kafka 总是在启动一段时间后自动关闭，区间大概是 2.3h~3h 之间。kafka server log 没有错误抛出，log 和正常关闭一模一样。kafka-server.log:[2016-01-11 12:15:06,435] INFO Verifying properties (kafka.utils.VerifiableProperties)[2016-01-11 12:15:06,...
应用启动后立马自动停了怎么处理
AndCo的博客
04-02 1154
在开发中我们经常会遇到测试或生产环境代码启动不了的情况。遇到这总情况大致可以用以下三步处理方式： 1.首先看有没有日志输出 查看应用输入的log日志，如果有对应log的日志可以对症下药。 2.查看控制台日志 如果没有log日志，说明应该可能还没有完全启动完成，这时候不一定有日志输出。那么就需要查看控制台日志了。 一般我们会运行一个启动脚本，这个时候修改一些启动参数后即可看到控制台输出。 一般来说生产/测试的运行信息不会输出控制台，需要修改脚本才可看到输出到控制台的信息。 简单介绍下 >>/
Kafka入门到精通
shuai_h的博客
07-10 3417
Kafka是由Apache软件基金会开发的一个开源流平台，由Scala和Java编写。Kafka的Apache官网是这样介绍Kakfa的。Apache Kafka是一个分布式流平台。发布和订阅流数据流，类似于消息队列或者是企业消息传递系统以容错的持久化方式存储数据流处理数据流Publish and subscribe：发布与订阅Store：存储Process：处理特性。
菜鸟的Kafka完整入门学习笔记，修订一
5akura's Blog
09-01 3028
文章目录一、Kafka概述1.1、定义1.2、消息队列（MQ）1.2.1、传统应用场景——异步处理1.2.2、使用消息队列的优点1.2.3、消息队列的两种模式1.3、Kafka架构二、快速入门2.1、安装配置与部署2.2、Kafka命令行操作三、Kafka高级—架构深入3.1、Kafka运作流程及消息文件存储3.2、生产者3.2.1、数据分区存放策略3.2.2、数据可靠性保证3.2.3、ACK应答机制3.2.4、面向消费者保持消息一致3.2.5、消息交付语义以及幂等性3.3、消费者3.3.1、两种消费方式3
消息中间件之二：kafka详解
企业实战系列集 ●●● https://ximenjianxue.blog.csdn.net
09-02 623
概述 Kafka是一种分布式的，基于发布/订阅的消息系统。 整理中……
Kafka API实战
悦分享
09-05 238
消息队列内部实现原理：（1）点对点模式（一对一，消费者主动拉取数据，消息收到后消息清除）点对点模型通常是一个基于拉取或者轮询的消息传送模型，这种模型从队列中请求信息，而不是将消息推送到客户端。这个模型的特点是发送到队列的消息被一个且只有一个接收者接收处理，即使有多个消息监听者也是如此。（2）发布/订阅模式（一对多，数据生产后，推送给所有订阅者）发布订阅模型则是一个基于推送的消息传送模型。
记录kafka consumer 消费失败
xc312726的专栏
06-07 1万+
简单记录一下困扰一天的kafka问题 背景是拿备份数据启kafka服务，之后项目就连不上kafka 输出大致是这样的： [ Thread-27] o.a.k.c.c.internals.AbstractCoordinator : [Consumer clientId=consumer-1, groupId=111] Group coordinator xxxxx:9092 (id: 2147483647 rack: null) is unavailable or invalid, wil...
【日常Exception】第十二回：Kafka启动异常报错：另一个程序正在使用此文件， 进程无法访问
热门推荐
Yangy的博客
01-07 1万+
1.问题 我在WIN7系统电脑启动kafka的服务端，启动后启动窗口报错，如下： ERROR Error while deleting the clean shutdown file in dir E:\kafka_2.11-2.3.1\tmp\kafka-logs (kafka.server.LogDirFailureChannel)java.nio.file.FileSystemExce...
Kafka 学习
傲视苍穹
07-17 2041
.zookeeper 1.1.安装配置 http://coolxing.iteye.com/blog/1871009 https://www.cnblogs.com/xiohao/p/5541093.html http://blog.51cto.com/tianshili/1762662 http://zookeeper.apache.org/doc/current/zookeeperStarte...
kafka-日志段LogSegment管理操作-源码学习笔记
沙滩上的拖鞋
11-09 466
背景 前面一篇文章已经说了日志段和日志的关系，日志通过ConcurrentSkipListMap 保存所有日志段对象，他是线程安全的，健值是可排序的。今天我们来探讨下日志段管理功能。 1、增加日志 Log 类中定义了添加日志段的方法addSegment. def addSegment(segment: LogSegment): LogSegment = this.segments.put(segment.baseOffset, segment) 通过源码可以看出，实质上就是调用ConcurrentSki
图解 kafka 日志模块 及相关源码注释
weixin_40954192的博客
06-23 426
append: private def append(records: MemoryRecords, isFromClient: Boolean, assignOffsets: Boolean, leaderEpoch: Int): LogAppendInfo = { maybeHandleIOException(s"Error while appending records to $topicPartition in dir ${dir.getParent}") { ...
kafka日志对象（三）—— Log的操作
fenglei0415的博客
05-23 2497
Log 的常见操作分为 4 大部分： 高水位管理操作：高水位的概念在 Kafka 中举足轻重，对它的管理，是 Log 最重要的功能之一。 日志段管理：Log 是日志段的容器。高效组织与管理其下辖的所有日志段对象，是源码的核心。 关键位移值管理：日志定义了很多重要的位移值，比如 Log Start Offset 和 LEO 等。确保这些位移值的正确性，是构建消息引擎一致性的基础。 读写操作：所谓的操作日志，大体上就是指读写日志。读写操作是kafka高吞吐量的基础。 高水位管理操作 一. 高水位定义
Kafka ERROR Error while deleting the clean shutdown file in dir
qq_15138049的博客
02-18 416
kafka 问题记录
为什么启动kafka显示index.cleaned -> D:\tmp\kafka-logs\__consumer_offsets-14\00000000000000000000.timeindex.swap: 另一个程序正在使用此文件，进程无法访问
05-19
2. 如果确定没有其他程序使用相同的文件，可以手动删除 Kafka 的日志文件，并重新启动 Kafka 服务。 3. 可以尝试重启计算机，以确保所有被锁定的文件都已经被释放。 4. 如果以上方法都无法解决问题，可以尝试升级 ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值