Filebeat采集日志交给Logstash

Filebeat采集日志交给Logstash

filebeat是轻量级的日志采集工具，可以将采集的日志交给logstash进行过滤匹配，然后由logstash存储到ES集群，也可以直接存储到ES集群中。

1.部署Filebeat采集器

filebeat采用rpm的方式进行部署。

[root@elkstack-1 tools]# rpm -ivh filebeat-7.9.3-x86_64.rpm 

filebeat配置文件内容

# vi /etc/filebeat/filebeat.yml
# 配置不同的输入
- type: log
# 是否启用该输入配置
enabled: false
# 采集的日志文件路径，可以通配
paths:
- /var/log/*.log
# 正则匹配要排除的行，这里以DBG开头的行都过滤掉
#exclude_lines: ['^DBG']
# 正则匹配要采集的行，这里以ERR/WARN开头的行都采集
#include_lines: ['^ERR', '^WARN']
# 排除的文件，默认采集所有
#exclude_files: ['.gz$']
# 添加标签
#tags: ["nginx"]
# 下面fields添加的字段默认是在fields.xxx，可以设置在顶级对象下
# fields_under_root: true
# 自定义添加的字段，一般用于标记日志来源
#fields:
# level: debug
# review: 1