ELK介绍

1. 简介

　　#官网地址：https://www.elastic.co/

　　日志主要包括系统日志、应用程序日志和安全日志。系统运维和开发人员可以通过日志了解服务器软硬件信息、检查配置过程中的错误及错误发生的原因。经常分析日志可以了解服务器的负荷，性能安全性，从而及时采取措施纠正错误。

　　通常，日志被分散的储存不同的设备上。如果你管理数十上百台服务器，你还在使用依次登录每台机器的传统方法查阅日志。这样是不是感觉很繁琐和效率低下。当务之急我们使用集中化的日志管理，例如：开源的syslog，将所有服务器上的日志收集汇总。

   　集中化管理日志后，日志的统计和检索又成为一件比较麻烦的事情，一般我们使用grep、awk和wc等Linux命令能实现检索和统计，但是对于要求更高的查询、排序和统计等要求和庞大的机器数量依然使用这样的方法难免有点力不从心。

　　开源实时日志分析ELK平台能够完美的解决我们上述的问题，ELK由ElasticSearch、Logstash和Kiabana三个开源工具组成：

　　Elasticsearch是个开源分布式搜索引擎，它的特点有：分布式，零配置，自动发现，索引自动分片，索引副本机制，restful风格接口，多数据源，自动搜索负载等。

　　Logstash是一个完全开源的工具，他可以对你的日志进行收集、过滤，并将其存储供以后使用（如，搜索）。

　　Kibana也是一个开源和免费的工具，它Kibana可以为 Logstash 和 ElasticSearch 提供的日志分析友好的 Web 界面，可以帮助您汇总、分析和搜索重要数据日志。

1.1 什么是elk

　　通俗来讲，ELK是由Elasticsearch、Logstash、Kibana 三个开源软件的组成的一个组合体，这三个软件当中，每个软件用于完成不同的功能，ELK 又称为ELK stack，官方域名为stactic.co，ELK stack的主要优点有如下几个：

　　处理方式灵活：elasticsearch是实时全文索引，具有强大的搜索功能

　　配置相对简单：elasticsearch全部使用JSON 接口，logstash使用模块配置，kibana的配置文件部分更简单。

　　检索性能高效：基于优秀的设计，虽然每次查询都是实时，但是也可以达到百亿级数据的查询秒级响应。

　　集群线性扩展：elasticsearch和logstash都可以灵活线性扩展

　　前端操作绚丽：kibana的前端设计比较绚丽，而且操作简单

1.2 什么是elasticsearch

　　是一个高度可扩展的开源全文搜索和分析引擎，它可实现数据的实时全文搜索搜索、支持分布式可实现高可用、提供API接口，可以处理大规模日志数据，比如Nginx、Tomcat、系统日志等功能。

　　一句话概括elasticsearch：一个采用Restful API标准的高扩展性和高可用性的实时数据分析的全文搜索工具。

　　

1.3 什么是logstash

　　可以通过插件实现日志收集和转发，支持日志过滤，支持普通log、自定义json格式的日志解析。

　　

1.4 什么是kibana

　　主要是通过接口调用elasticsearch的数据，并进行前端数据可视化的展现。

 　　

 　　ELK部署请参考下一篇：https://www.cnblogs.com/qianjingchen/articles/10275974.html

 

转载于:https://www.cnblogs.com/qianjingchen/articles/10275740.html