logstash优点_日志搜集处理框架---浅谈logstash

1简介

Logstash是一款轻量级的日志搜集处理框架，可以方便的把分散的、多样化的日志搜集起来，并进行自定义的处理，然后传输到指定的位置，比如某个服务器或者文件。它是ELK Stack重要的组成部分，诞生于2009年8月2日，作者是世界著名运维工程师Jordan Sissel。

2设计及架构

LogStash由JRuby语言编写，基于消息(message-based)的简单架构，并运行在Java虚拟机(JVM)上。不同于分离的代理端(agent)或主机端(server)，LogStash可配置单一的代理端(agent)与其它开源软件结合，以实现不同的功能。在LogStash的生态系统中，主要分为四大组件：Shipper：发送事件(events)至LogStash；通常，远程代理端(agent)只需要运行这个组件即可；

Broker and Indexer：接收并索引化事件；

Search and Storage：允许对事件进行搜索和存储；

Web Interface：基于Web的展示界面

正是由于以上组件在LogStash架构中可独立部署，才提供了更好的集群扩展性。

在大多数情况下，LogStash主机可分为两大类：

代理主机(agent host)：作为事件的传递者(shipper)，将各种日志数据发送至中心主机；只需运行Logstash代理(agent)程序；

中心主机(central host)：可运行包括中间转发器(Broker)、索引器(Indexer)、搜索和存储器(Search and Storage)、W