由于项目中,要求统计分析系统运行期间的日志,根据不同的日志类别,在前台JSP通过Echarts图标展示,所以需要对日志进行处理,将其整理成能够使用的JSON格式日志,然后输出前台展示。
由于之前没有接触过,一开始比较懵逼,网上通过搜集资料,找到了大家都基本上通过Grok进行日志的统计分析,Grok进行日志处理的好处有:1:默认集成了多中正则表达式;2:支持自定义的正则表达式。
1、正则表达式库
Grok内置了许多的正则表达式库,便于我们直接使用开发(github搜索grok,项目一般都有这个pattern文件)。
也可以直接用下面任一地址,下载保存
https://github.com/logstash-plugins/logstash-patterns-core/tree/master/patterns 或
https://github.com/thekrakken/java-grok/blob/master/src/main/resources/patterns/patterns
正式使用
简单Java项目
如果是简单Java项目,直接引入依赖的jar包即可,对于0.1.5的版本,必须引入5个jar包:commons-lang3-3.1.jar、slf4j-api-1.7.