ELK架构监控MySQL慢日志

季风泯灭的季节

已于 2023-12-08 09:38:50 修改

阅读量3.6k

点赞数

分类专栏： Elastic Stack 技术栈及其详细应用文章标签： elk 架构 mysql

于 2023-12-08 09:38:22 首次发布

本文链接：https://blog.csdn.net/lmj3732018/article/details/134870273

版权

Elastic Stack 技术栈及其详细应用专栏收录该内容

21 篇文章 1 订阅 ¥29.90 ¥99.00

订阅专栏

超级会员免费看

本文介绍如何利用Filebeat收集MySQL慢查询日志，通过Redis缓存，然后由Logstash转发到Elasticsearch存储，最终在Kibana进行可视化展示。详细涉及架构概述、安装部署、Filebeat及Logstash的配置步骤。

摘要由CSDN通过智能技术生成

一、架构概述

本文使用将使用filebeat收集mysql日志信息，发送到redis中缓存，由logstash从redis中取出，发送es中存储，再从kibana中展示。

二、安装部署

ELK各中间件的安装部署参考章节：审计日志>ELK日志收集，此处不再赘述。

三、Filebeat配置

filebeat.inputs:
- type: log
  enabled: true
  paths:
    - /usr/local/mysql-8.2.0/mysql_slow.log
  scan_frequency: 10s
  multiline.pattern: '^\s*# Time:'
  multiline.negate: true
  multiline.match: after 
 
 
output.redis:
  enabled: true
  hosts: ["192.168.122.227:6379","192.168.122.237:6379","192.168.122.238:6379"]
  key: "uap-mysql-slow-log"
  datatype: list
  password: "Redis@123456" 
  db: 0
  codec: [ json ]
  loadbalance: true
 
logging.level: info
logging.to_files: true
logging.files:
  path: /opt/module/filebeat-8.11.0
  name: