BlackMoon

在日常的运维过程中，对系统日志和业务日志的处理比较重要，对于以后的数据分析、排查异常问题有很重的作用。今天就分享一个自己基于kafka+ELK+filebeat的日志记录分析平台。 组件介绍 Elasticsearch Elasticsearch(ES)是一个基于Lucene构件的开源、分布式、RESTful接口全文搜索引擎。ES还是一个分布式文档数据库，其中每个字段均是被索引的数据且可被搜索，它能够扩展至数以百计的服务器存储以及处理PB级别的数据。它可以在很短的时间内在存储、搜索和分析大量的数据。它通常

安装环境 操作系统：CentOS Linux release 7.8.2003 kafka版本：2.4.1 下载地址 http://kafka.apache.org/downloads.html 集群规划 服务器lnh01 服务器Lnh02 服务器lnh03 zookeeper zookeeper zookeeper kafka kafka kafka 安装步骤 上传压缩包到服务器 解压至/opt/soft下 命令：tar -zxvf kafka_2.12-2.4.1.

安装环境 操作系统：CentOS Linux release 7.8.2003 ZK版本：3.4.6 下载地址 http://archive.apache.org/dist/zookeeper/zookeeper-3.4.6/ 集群规划 服务器lnh01 服务器Lnh02 服务器lnh03 zookeeper zookeeper zookeeper 安装步骤 上传tar.gz包到服务器 解压至/opt/soft下 命令：tar -zxvf zookeeper-3.4.6.t