ELK集成FileBeat日志可视化配置

本文介绍了在项目中采用ELK(Elasticsearch, Logstash, Kibana)进行日志可视化的过程。初始使用Filebeat+Logback监控日志,但遇到日志索引未创建的问题,通过调整配置并引入Logstash解决了日志切割问题。文中详细分享了Logstash配置以实现日志字段分割,并提到了在Mac上启动Filebeat和Logstash时的注意事项。" 88914418,5621974,深入理解区块链中的SHA256算法,"['密码学', '区块链', 'SHA256']
摘要由CSDN通过智能技术生成

起因: 项目需要日志可视化,最终选型ELK。

             考虑多种原因,起初使用框架是ES+Kibana+Filebeat+Logback。

问题:

        一、Filebeat成功监控到日志后,不创建index,在Kibana无法可视化搜索。

               原因:配置文件不正确,在网上查找资料,东西很多,但是均找不到问题根源,后来自己找了一段时间,发现原因。以下是目前阶段正确显示配置,因为无法切割日志(下文详写),后加入LogStash。

filebeat.inputs:
- type: log
  enabled: true
# 配置filebeat日志扫描路径
  paths:
    - /Users/xxx/Desktop/log/*.log
    
# 跨行读取
multiline.pattern: '^[0-2][0-9]:[0-5][0-9]:[0-5][0-9]'
multiline.negate: true
multiline.match: after
  
setup.template.name: "my-log"
setup.template.pattern: "my-log-*"
setup.ilm.enabled: false

#output.elasticsearch:
#  enabled: true
#  hosts: ["localhost:9200"]
#  index: "log-%{+yyyy.MM.dd}"


# logstash output
# 将日志输出到logstash
output.logstash:
   hosts: ["127.0.0.1:5044"]

        二、 在没有使用

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值