95-10-050-启动-LogManager日志

九师兄

于 2021-03-27 07:40:26 发布

阅读量173

点赞数

分类专栏： 2025最新-大数据-kafka 文章标签： kafka

本文为博主九师兄（QQ:541711153 欢迎来探讨技术）原创文章，未经允许博主不允许转载。

本文链接：https://blog.csdn.net/qq_21383435/article/details/115258942

版权

2025最新-大数据-kafka 专栏收录该内容

426 篇文章 ¥99.90 ¥299.90

订阅专栏

本文深入探讨了Kafka在启动过程中如何处理和管理日志，包括日志清理任务的定时触发、清理策略（如日志压缩和删除）、日志刷写到硬盘的机制，以及相关配置参数的作用。重点关注了`cleanupLogs`和`flushDirtyLogs`方法，阐述了日志的删除和持久化流程。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

文章目录

1.视界
1 概述
2 入口方法
2 定时任务总方法
- 2.1 清理日志
- 2.2 删除过大的segments
3. 日志刷到硬盘
- flushDirtyLogs
- checkpointLogRecoveryOffsets

1.视界

在这里插入图片描述

1 概述

目前来说，kafka的日志中记录的内容比较多，具体的存储内容见这篇博客，写的比较好。可以看到，存储的内容还是比较多的，当存储文件比较大的时候，我们应该如何处理这些日志？下面我们通过kafka启动过程的源码，分析下kafka的日志处理过程。

2 入口方法

在kafkaServer.scala中的start方法中，有一个这样的调用：

/** start log manager */
logManager = LogManager(config, initialOfflineDirs, zkClient, brokerState, kafkaScheduler, time, brokerTopicStats, logDirFailureChannel)
logManager.startup()

2 定时任务总方法

这块就是启动了日志相关的定时任务，具体都有哪些内容？我们跟进去看一下：

了解本专栏