filebeat 输入配置编写(基本配置)
EFK 中filebeat的文件输入 抽取本地文件的配置文件编写
filebeat.inputs:
- type: log
enabled: true
paths:
- /var/log/*.log
#- /var/log/*/*.log
# 抽取普通日志。模块格式化抽取。
- type: log
paths:
- "/var/log/apache2/*"
fields:
apache: true
fields_under_root: true
url:https://www.elastic.co/guide/en/beats/filebeat/current/configuration-filebeat-options.html 官方网文档的抽取和配置。
因为抽取日志的时候 日志的消息的采集是属于多个文件的夺取 所需需要配置一些多行管理的参数事件
multiline.type: pattern
multiline.pattern: '^\[' # 采用正则匹配对所采集日志进行模块化区分
multiline.negate: true # 根据一下两个参数,对所采集日志进行模块化划分
multiline.match: after
exclude_lines: ['^DBG'] #不包含的字段行数过滤
include_lines: ['^ERR', '^WARN'] # 包含的字段行
容器日志的收集
输入配置
如果在docker 的配置文件中Deam.json
Dokcer 默认的日志日志驱动是 json-file
,该驱动将将来自容器的 stdout 和 stderr 日志都统一以 json
的形式存储到本地磁盘
{
"log-driver"