elastic: k8s 部署 EFK 日志系统

背景:
k8s 上面会跑大量的pod/容器。 特别是 集群相关的控制面 容器, 业务容器,有时候我们要对容器日志进行 监控与分析处理,这时一套好用的日志系统就格外的重要。
而成熟的日志解决方案有哪些呢? 以前的ELK , k8s主推的基于云原生的EFK ,这里的F是 CNCF认证的子项目 fluentd ,
fluentd 是 ruby的项目 ,由于个人体验习惯与yaml配置,以及项目特点, 选择了filebeat ,所以 整套日志系统使用的技术包括(elastic search fidlebeat kibana)
官方项目地址:
https://github.com/elastic/beats/tree/master/filebeat
https://www.elastic.co/guide/en/beats/filebeat/current/filebeat-getting-started.html
配置文件:
https://github.com/chenpfeisoo/EFK-logging-deployment
该配置文件中对于采集器有fluentd ,也有filebeat ,看个人喜好部署
注意事项:
对于filebeat 我们会在comfigmap中配置 对采集做配置
比如 多行显示:

官方推荐

      multiline.pattern: '^\['
      multiline.negate: true
      multiline.match: after

java应用:

  include_lines: ['Caused by']
  multiline:
      pattern: '^\['
      negate:  true
      match:   after

pattern 后面的正则表达式 按应用需求配置即可。
效果
采集到的是 istio-system 命名空间下 的 mixer组件日志
在这里插入图片描述

评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值