ELK logstash gork匹配在线测试

最新推荐文章于 2025-03-30 10:55:07 发布

夏已微凉、

最新推荐文章于 2025-03-30 10:55:07 发布

阅读量6k

点赞数 1

分类专栏： # Es 文章标签： gork在线测试 gork在线匹配测试 gork匹配测试 logstash grok

本文链接：https://blog.csdn.net/qq_36025814/article/details/108842264

版权

Es 专栏收录该内容

22 篇文章

订阅专栏

本文介绍Logstash日志解析的三种方式：在线调试、Kibana调试及自定义正则表达式的应用，并通过实例展示如何高效进行日志匹配。

摘要生成于 C知道，由 DeepSeek-R1 满血版支持，前往体验 >

一、在线调试
二、kibana 中调试
三、匹配方式

一、在线调试

grok debugger 在线调试
内容

[2020-09-26 08:34:41] 127.0.0.1 GET local.test.com:8010/index/index/test?name=张三&id=9 0.412191
[ info ] 信息异常

正则

[\s\S]*\]\s(?<client_ip>[0-9\.]+)\s(?<method>[A-Za-z]+)\s(?<url>[^\s]+)\s(?<duration>[0-9\.]+)[\s\S]*

结果

{
  "client_ip": [
    [
      "127.0.0.1"
    ]
  ],
  "method": [
    [
      "GET"
    ]
  ],
  "url": [
    [
      "local.test.com:8010/index/index/test?name=张三&id=9"
    ]
  ],
  "duration": [
    [
      "0.412191"
    ]
  ]
}

截图

二、kibana 中调试

如果你安装了 kibana，也可以在 kibana 中调试

kibana首页 -> Console
选择 Grok Debugger

三、匹配方式

1）、自定义正则

匹配内容

[2020-09-26 08:34:41] 127.0.0.1 GET local.test.com:8010/index/index/test?name=张三&id=9 0.412191

匹配正则

[\s\S]*\]\s(?<client_ip>[0-9\.]+)\s(?<method>[A-Za-z]+)\s(?<url>[^\s]+)\s(?<duration>[0-9\.]+)[\s\S]*

2）、logstash自带的grok

ELK logstash的grok 自带的正则匹配
匹配内容

[2020-09-26 13:07:54] GET http://www.test.com/index/index/test 0.118220

匹配正则

\[%{TIMESTAMP_ISO8601:timestamp}\] %{USERNAME:method}

3）、logstash自带的grok + 自定义正则 custom patterns

大家注意了：grok调试支持custom patterns（自定义正则）调试

可以参考一下这篇：ELK logstash的grok 自带的正则匹配、自定义正则使用

匹配内容

[2020-09-26 13:07:54] GET http://www.test.com/index/index/test 0.118220

匹配正则

\[%{TIMESTAMP_ISO8601:timestamp}\] %{USERNAME:method}[T ]%{URL:url} %{NUMBER:exec_time}

自定义正则 URL

URL (http(s)?:\/\/)?%{URIHOST:domain_name}%{URIPATH}