ELK日志收集平台搭建

最新推荐文章于 2024-08-22 00:15:00 发布

养-乐多

最新推荐文章于 2024-08-22 00:15:00 发布

阅读量342

点赞数 1

分类专栏： Elasticsearch入门到精通文章标签： ELK 分布式日志

本文链接：https://blog.csdn.net/qq_15003505/article/details/103461164

版权

本文介绍了如何分步搭建Elastic Stack（ELK）日志收集平台，包括安装Elasticsearch集群、Kibana、Logstash和Filebeat。在配置过程中，重点强调了Elasticsearch的节点设置、Kibana的安装、Logstash的性能调优以及Filebeat的日志收集。通过这些步骤，可以实现高效且稳定的日志管理和分析。

摘要由CSDN通过智能技术生成

Elastic Stack(旧称ELK)是一个开源的日志处理平台，主要组件为Elasticsearch（分布式存储），Logstash（日志收集/字段处理/管道），Kibana（前端展示），在适当的硬件基础上拥有处理亿级日志或文档的能力。
在这里插入图片描述

分步指南

Elasticsearch

首先，安装Elasticsearch集群环境，关于节点数量，ES集群会自动的选举出master节点，集群中其他节点则会成为slave节点。为了避免选举产生‘脑裂’问题，通常会搭建奇数个节点。

官网下载RPM或deb包并安装。

修改配置文件
a. jvm配置文件，主要修改java虚拟机堆大小，默认为2G。因为测试机内存为8G，故将heap size设置为6G即可：/etc/elasticsearch/jvm.options

-Xms6g
-Xmx6g

b. 修改ES配置文件，主要参数如下：/etc/elasticsearch/elasticsearch.yml

cluster.name: abc-elk #集群名称
node.name: node-1 #节点名称，各节点依次设置为1/2/3
path.data: /niub/lib/elasticsearch  # 数据存储目录，默认在/var下
path.logs: /niub/log/elasticsearch  #日志存储目录，默认在/var下
network.host: 172.16.100.192   #绑定IP，节点间通讯用的接口
discovery.zen.ping.unicast.hosts: ["172.16.100.192", "172.16.100.193"]   #集群内所有节点的接口IP