分布式日志分析系统(一):基于Elasticsearch+Filebeat+Kibana的搭建

本文介绍了如何搭建一个基于Elasticsearch、Filebeat和Kibana的分布式日志分析系统。首先,安装JDK 1.8,接着部署Elasticsearch并配置数据存储路径和JVM内存。然后,配置Elasticsearch-head插件,通过Node.js和Grunt安装。接着,安装Filebeat并修改配置文件,将日志输出到Elasticsearch。再安装Kibana并调整配置,确保Kibana能正确连接Elasticsearch。最后,对于集群部署,确保所有节点的cluster name一致。
摘要由CSDN通过智能技术生成

0、引言

  最近在实习做了一个课题,关于分布式的日志分析系统的部署,一般做这一块,网上有现成的ELK框架(Elasticsearch+Logstash+Kibana)完成,老大说Logstash在服务器上部署资源消耗比较大,推荐用Filebeat,于是我就简单地搭了下环境,跑了起来。话不多说,直接上干货。

1、安装JDK,至少是1.8版本的,网上有很多攻略,可以找一个看看;

  在cmd下执行java -version,如果显示java版本是1.8的,这一步可以不用做;

2、Elasticsearch安装配置

  2.1、可以上官网下载:Elasticsearch下载,我下的是zip版本的;

  2.2、下载完了之后,解压,然后修改配置文件,路径是:你下载的路径/config/elasticsearch.yml

# ---------------------------------- Cluster -----------------------------------
#
# Use a descriptive name for your cluster:
#
cluster.name: "xiaoyi-host"
#
# ------------------------------------ Node ------------------------------------
#
# Use a descriptive name for the node:
#
node.name: "xiaoyi-node-1"
#
# Add custom attributes to the node:
#
#node.attr.rack: r1
#
# ----------------------------------- Paths ------------------------------------
#
# Path to directory where to store the data (separate multiple locations by comma):
#
path.data: G:\
#
# Path to log files:
#
path.logs: G:\
#

  主要是对路径进行修改,可以自己新建一个文件夹把数据存储进去,节点名字跟集群名字可以改成自己的

  2.3 修改/config/jvm.option(可选项)


# Xms represents the initial size of total heap space
# Xmx represents the maximum size of total heap space

-Xms1g
-Xmx1g

  主要是对jvm内存进行调整,如果运行的时候报内存溢出的话,可以适当地把内存调大一些,因为我机子配置没有报错,所以这一步我是默认的。

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值