logback 多实例 归档问题 无法自动删除.tmp文件问题

在使用slf4j的logback实现时,使用TimeBasedRollingPolicy根据时间滚动日志策略并使用RollingFileAppender进行日志滚动,多进程共用同一个日志文件时,会出现较多xxxxxx.tmp文件未删除的情况。

出现tmp文件的条件: 使用TimeBasedRollingPolicy/RollingFileAppender配置,并启用压缩,并配置的<file></file>标签名称与滚动名称模板不同(如打印日志时文件名为demo.log,归档时文件名demo.2019-12-12.log.gz),并且单应用启动多实例共用一个日志文件作为输出,例如:

	<appender name="File"
		class="ch.qos.logback.core.rolling.RollingFileAppender">
		<file>${LOG_HOME}/demo.log</file>
		<rollingPolicy
			class="ch.qos.logback.core.rolling.TimeBasedRollingPolicy">
			<FileNamePattern>${LOG_HOME}/demo.log.%d{yyyy-MM-dd}.log.gz
			</FileNamePattern>
			<MaxHistory>30</MaxHistory>
		</rollingPolicy>
		<encoder
			class="ch.qos.logback.classic.encoder.PatternLayoutEncoder">
			<pattern>%d{yyyy-MM-dd HH:mm:ss} [%thread] %-5level %logger{50} - %msg%n</pattern>
		</encoder>
	</appender>

多进程将日志输出到同一个日志文件logback是允许的,仅输出也不会出现问题,但是当归档时,多个进程同时归档,原文件与目标文件(归档文件)名称不同时,会首先关闭输出流,然后将原日志文件rename为xxx.timestamp.tmp,然后读取tmp文件输出到目标归档文件,此时如果是多进程,其他进程那一时刻很有可能没有关闭输出流,所以tmp文件内容一致再增加,并且当其他进程开始归档时也会同样的流程创建tmp文件,然是创建tmp文件后,后续判断归档文件已存在,直接返回了,导致tmp文件未被删除。

解决方法:

1. 不压缩(但是多进程也存在问题,日志输出混乱,某个时间点的日志可能出现在上一个时间点日志文件内)

2. 删除<file>xxx</file>标签,此时产生的日志文件名与归档文件名相同(归档文件后缀.gz/zip),不需要创建临时文件,

### 解决 Logback 生成过多 .tmp 文件的方法 当多个实例共享同一日志文件时,`TimeBasedRollingPolicy` 和 `RollingFileAppender` 的组合可能会导致 `.tmp` 文件未能及时清理的问题[^1]。为了避免这种情况的发生,可以采取以下措施: #### 配置优化建议 1. **设置正确的 MaxHistory 属性** 通过配置 `<maxHistory>` 参数来限定保留的日志存档数量,这有助于减少不必要的临时文件堆积。 2. **启用 Clean History On Start 功能** 利用 `<cleanHistoryOnStart>true</cleanHistoryOnStart>` 设置可以在启动应用程序时清除旧的历史记录,从而避免残留的`.tmp`文件累积。 3. **调整 File Naming Pattern** 确保定义了一个合适的文件命名模式以区分不同会话产生的日志条目,这样即使有并发写入也不会干扰正常的归档流程。 4. **应用 Proper Locking Strategy** 采用恰当的锁定机制(如 `CompositeFileLock`),使得各个进程能够安全地访问公共日志资源而不至于造成冲突或遗留未完成的操作。 5. **引入 Async Appenders** 考虑使用异步追加器 (`AsyncAppender`) 来减轻主线程负担的同时也提高了 I/O 效率,减少了因竞争条件而引发的问题几率。 以下是经过上述改进后的 logback-spring.xml 示例片段: ```xml <configuration> <!-- ... --> <appender name="FILE" class="ch.qos.logback.core.rolling.RollingFileAppender"> <file>/path/to/logs/application.log</file> <rollingPolicy class="ch.qos.logback.core.rolling.TimeBasedRollingPolicy"> <!-- daily rollover --> <fileNamePattern>/path/to/archived/logs/app.%d{yyyy-MM-dd}.%i.gz</fileNamePattern> <!-- keep only last 7 days worth of history --> <maxHistory>7</maxHistory> <!-- clean up old files on start --> <cleanHistoryOnStart>true</cleanHistoryOnStart> <!-- compress archived logs --> <timeBasedFileNamingAndTriggeringPolicy class="ch.qos.logback.core.rolling.SizeAndTimeBasedFNATP"> <maxFileSize>10MB</maxFileSize> </timeBasedFileNamingAndTriggeringPolicy> </rollingPolicy> <encoder> <pattern>%date %level [%thread] %logger{10} [%file:%line] %msg%n</pattern> </encoder> <!-- Use async appender to improve performance and reduce contention --> <appender-ref ref="ASYNC_FILE"/> </appender> <appender name="ASYNC_FILE" class="ch.qos.logback.classic.AsyncAppender"> <queueSize>500</queueSize> <discardingThreshold>0</discardingThreshold> <neverBlock>true</neverBlock> <appender-ref ref="FILE"/> </appender> <!
评论 2
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值