logstash过滤nginx日志

最新推荐文章于 2022-04-07 14:16:59 发布

weixin_34417635

最新推荐文章于 2022-04-07 14:16:59 发布

阅读量137

点赞数

文章标签：运维 python 大数据

原文链接：https://my.oschina.net/u/259976/blog/832804

版权

2019独角兽企业重金招聘Python工程师标准>>>

nginx日志格式

    log_format main '$host '
                    '$server_addr '
                    '$remote_addr '
                    '- '
                    '"$time_local" '
                    '$status '
                    '$body_bytes_sent '
                    '$request_time '
                    '"$http_referer" '
                    '"$request" '
                    '"$http_user_agent" '
                    '$pid';

安装pattern位置在：/usr/share/logstash/vendor/bundle/jruby/1.9/gems/logstash-patterns-core-4.0.2/patterns 创建一个规则nginx

%{HOSTNAME:host} %{IP:resip} %{IP:clientip} - "%{HTTPDATE:timestamp}" %{INT:response} %{INT:body_bytes_sent} %{NUMBER:requesttime:float} %{QS:referrer} %{QS:request} %{QS:agent} %{NUMBER:ngxpid}

使用grok debugger进行调试 Grok debugger传送门

参考资料： LOGSTASH+ELASTICSEARCH+KIBANA处理NGINX访问日志

转载于:https://my.oschina.net/u/259976/blog/832804