python实时监控logstash日志

最新推荐文章于 2024-08-24 09:42:31 发布

hey，emmby

最新推荐文章于 2024-08-24 09:42:31 发布

阅读量3.1k

点赞数

分类专栏： Python程序文章标签： logstash python 游标日志切割

本文链接：https://blog.csdn.net/xiaozhiit/article/details/84431541

版权

本文介绍如何利用Python实现对Logstash日志的实时监控，通过游标技术跟踪文件变化，并在日志文件被切割时无缝切换，确保日志数据的完整处理。

摘要由CSDN通过智能技术生成

实时读取logstash日志，有异常错误keywork即触发报警。

# /usr/bin/env python3
# -*- coding: utf-8 -*-
# __author__ = caozhi
# create_time 2018-11-12,update_time 2018-11-15
# version = 1.0
# 录像高可用报警
# 1 读取日志 使用游标移动
# 2 线上业务日志文件会切割，切割后，读取上一个切割的日志

import os
import sys
import json
import requests
import time
import re

cini = conf.ini'
log_file = logstash.log'

def readconf():
    try:
        with open(cini, 'r+') as f:
            CONF = json.load(f)
    except:
        CONF = {"seek": 0, "inode": 922817, "last_file": logstash.log"}
        writeconf(CONF=CONF)
        print('conf.ini 配置文件缺失，自动创建一个新的配置文件')
    return CONF

def writeconf(CONF):
    with open(cini, 'w+') as e:
        json.dump(CONF, e)

def read_log(log_file, seek):
    try:
        f = open(log_file, 'r')
    except FileNotFoundError:
        f = open(logstash.log', 'r')