kibana可视化：监控mysql慢查询、错误日志日志

在Kibana中监控MySQL的慢查询日志和错误日志，首先需要确保这些日志数据已经被正确地收集并传输到Elasticsearch中。这通常通过使用Filebeat这样的日志收集器来完成。以下是具体步骤：

1. 配置Filebeat

收集慢查询日志

• 配置Filebeat输入：在Filebeat的配置文件（通常是filebeat.yml）中，添加一个输入来监控MySQL的慢查询日志路径。例如：

  - type: log
    enabled: true
    paths:
      - /var/log/mysql/mysql-slow.log
    fields:
      type: mysql_slow
    multiline.pattern: '^[0-9]{4}-[0-9]{2}-[0-9]{2}'
    multiline.negate: true
    multiline.match: after
  

  这里假设慢查询日志位于/var/log/mysql/mysql-slow.log，并且配置了多行处理以便正确解析日志。

收集错误日志

• 同样，在Filebeat的配置文件中添加另一个输入来监控MySQL的错误日志路径，例如：

  - type: log
    enabled: true
    paths:
      - /var/log/mysql/error.log
    fields:
      type: mysql_error
    multiline.pattern: '^[0-9]{4}-[0-9]{2}-[0-9]{2}'
    multiline.negate: true
    multiline.match: after
  

  这里假定错误日志位于/var/log/mysql/error.log。

2. 输出配置

确保Filebeat配置的输出是Elasticsearch，并正确指定了Elasticsearch的地址和索引名称。例如：

output.elasticsearch:
  hosts: ["localhost:9200"]
  indices:
    - index: "mysql-logs-%{[fields.type]}-%{+yyyy.MM.dd}"
      when.contains:
        fields.type: ["mysql_slow", "mysql_error"]

3. 启动Filebeat

• 保存配置文件并重启Filebeat服务，确保它开始收集并发送日志数据到Elasticsearch。

4. 配置Kibana索引模式

• 在Kibana中，创建指向Filebeat收集的MySQL日志索引的索引模式（如mysql-logs-*），并定义时间戳字段。

5. 创建可视化和仪表板

• 慢查询可视化：使用Kibana的可视化工具创建图表，例如，创建一个柱状图来展示按查询时间范围分类的慢查询次数。

• 错误日志分析：创建另一个可视化，例如，使用条形图显示最常见的错误类型或错误消息。

• 仪表板整合：将上述可视化整合到一个仪表板中，以便在一个页面上同时监控MySQL的慢查询和错误日志。

6. 设置警报（可选）

• 根据需要，配置Kibana的警报功能，当检测到特定的慢查询阈值或特定错误出现时自动发送警报。

通过以上步骤，你就可以在Kibana中有效地监控MySQL的慢查询和错误日志，及时发现并解决数据库性能问题和错误。