Logstash数据源为日志文件操作

最新推荐文章于 2024-05-16 05:11:44 发布

禅剑一如

最新推荐文章于 2024-05-16 05:11:44 发布

阅读量703

点赞数

分类专栏： elastic stack docker

本文链接：https://blog.csdn.net/zsx18273117003/article/details/106116428

版权

本文档介绍了如何在Springboot应用中整合ELK栈，并详细讲述了如何配置Logstash从日志文件中收集数据。首先通过Python脚本模拟日志生成，然后修改Logstash配置文件添加文件数据源，接着更新Docker容器的日志挂载目录，最后重启Logstash容器并验证结果。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

在Springboot整合ELK基础上进行

一、模拟日志

1. 在D:\usr\local\bin\start目录下编写python脚本save_log.py

#!/usr/bin/python
# -*- coding: UTF-8 -*-
import datetime
import threading

import os

# 递归级联创建的目录
path = "D:/usr/local/logs"
if not os.path.exists(path):
    os.makedirs(path)

# 方法1： 此方法文件夹不存在会报错：FileNotFoundError: [Errno 2] No such file or directory
with open('D:/usr/local/logs/spring.log', mode='a+', encoding='utf-8') as f:
    now = datetime.datetime.now().strftime('%Y-%m-%d %H:%M:%S.%f')[:-3]
    thread_id = threading.currentThread().native_id
    log_str = f'{now} DEBUG {thread_id} --- [scheduling-1] org.jooq.tools.LoggerListener            : ' \
              'Executing query          : select id from user'
    f.writelines(f'{log_str}\n')
    f.close()
    print(