Logstash 是支持实施管道的开源的数据收集引擎,它可以把不同的数据源统一到指定的地方,并对数据格式化以便分析和提供可视化用例。用 JRuby 来写的, 在 JVM 上运行。
Logstash 可以处理各种数据 ,web服务器日志,应用程序日志log4j以及其他的日志如syslog, Windows event logs, 网络和防火墙 日志等等。
安装
可以下载tar包进行安装,也可以配置本地yum 进行yum安装
输入如下命令
cd logstash-2.3.0
bin/logstash -e 'input { stdin { } } output { stdout {} }'
输出如下内容则证明安装成功
hello world
2013-11-21T01:22:14.405+0000 0.0.0.0 hello world
退出Logstash可以用 CTRL-D。
Logstash 如何工作
Logstash 是基于管道的,它有三重要的插件组成:
Input:从数据源收集数据
Filter:修改指定的数据
Output:把数据写到指定地方
可以通过添加配置文件来配置这三个插件。