java实现大文件日志按线程分割的方法

最新推荐文章于 2022-08-19 16:46:08 发布

衣草音

最新推荐文章于 2022-08-19 16:46:08 发布

阅读量559

点赞数

分类专栏： java 文章标签： java 日志分析

本文链接：https://blog.csdn.net/m0_37654974/article/details/103293496

版权

本文介绍了一种在Java中处理大文件日志的方法，通过分析日志内容，依据线程名将日志分割到不同的文件中，以方便问题排查。涉及到的关键步骤包括读取大文件、识别线程关键字以及写入对应文件。

摘要由CSDN通过智能技术生成

java实现大文件日志按线程分割的方法

使用场景
基本思路
关键代码
- 环境
- 代码

使用场景

服务器日志文件非常大,不同的线程打印在一个文件里,排查问题非常不方便。log4j好像不支持按线程打印日志的方法,可以通过脚本分割日志。

基本思路

读取日志大文件
逐行分析日志,根据关键字判断线程名称(比如:pool thread)
根据线程名称把内容写入对应的文件

关键代码

环境

jdk 1.8
ide idea

代码

LogService.java

{
   

    private String source;

    private String targetPath;

    /**
     * 线程名称规则, 可以根据实际情况调整
     */
    private String[] threadNameRules = {
   "pool", "thread"};

    private static Map<String, LogHandler> map = new HashMap<>();

    public LogService(String source, String targetPath) {
   
        this.source = source;
        this.targetPath = targetPath;
    }

    /**
     * 初始化文件夹
     */
    private void initFolder() {
   
        File resources = new File(targetPath);
        if (resources.exists()) {
   
            /*清空文件夹*/
            FileUtils.deleteFile(resources);
        } else {
   
            boolean result = resources.mkdir();
            if (!result) {
   
                System.out.println("创建文件夹失败");
            }
        }
    }

    public void invoke() {
   
        initFolder();
        readAndWrite()<