ELK日志系统实战(三):filebeat配置启动

本文详细介绍了如何配置和启动filebeat,以实现从springboot日志到ELK(Elasticsearch、Logstash、Kibana)或者Kafka的数据传输。在logback中调整了日志输出格式,然后通过filebeat收集analy.xxxx-xx-xx.log文件,并根据不同的线路(直接到ES或先到Kafka)进行设置。在线路一中,添加了ES pipeline,设置IK分词器和mapping,最后通过Kibana查看数据;线路二则配置了filebeat到Kafka的传输,数据可通过Kafka消费者查看。
摘要由CSDN通过智能技术生成

目录

filebeat配置流程图

springboot日志格式(在logback中修改输出格式)

filebeat配置启动

解压,进入到filebeat

线路一

1.添加es pipeline

2.添加index 设置ik分词器+mapping

3.添加filebeat2es配置

线路二

1.添加filebeat2kafka配置

启动

线路一

线路二

查看数据

线路一,使用kibana查看

 线路二,使用kafka 消费者查看

百度网盘链接


filebeat配置流程图

 ​​​​​​​

 

springboot日志格式(在logback中修改输出格式)

格式:日期 [thread] level 日志内容

2022-05-20 10:26:43.331 [http-nio-31200-exec-1] ERROR c.y.h.platform.common.exception.ExceptionCatch - catch exception:
com.yss.henghe.platform.common.exception.CustomException: Communications link failure

filebeat配置启动

前提:filebeat这次配置完成需求一(收集各个平台的日志

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值