Filebeat Logstash crontab 定时采集日志

最新推荐文章于 2024-08-16 18:44:59 发布

浮云疮狗

最新推荐文章于 2024-08-16 18:44:59 发布

阅读量959

点赞数

分类专栏：运维 linux 文章标签： logstash filebeat crontab 日志收集

本文链接：https://blog.csdn.net/qq_25388339/article/details/103821729

版权

本文档介绍了在CentOS 6.9系统上，如何部署Filebeat和Logstash，结合crontab实现日志定时采集的详细步骤。包括Filebeat的下载、配置、环境变量设置、启动脚本编写和crontab任务配置。接着，讲述了Logstash的安装、配置文件编写、启动脚本创建和crontab任务的设定。最后，提供了流程参考链接。

摘要由CSDN通过智能技术生成

一、系统环境及软件版本

CentOS release 6.9 (Final)

java 1.8

logstash-6.6

filebeat 6.6

crontab

二、Filebeat部署

1）下载filebeat源码包

wget https://artifacts.elastic.co/downloads/beats/filebeat/filebeat-6.6.0-linux-x86_64.tar.gz

2）解压源码包

tar xvf filebeat-6.6.0-linux-x86_64.tar.gz -C /usr/local/

mv /usr/local/filebeat-6.6.0-linux-x86_64/ /usr/local/filebeat

3）修改配置文件

vim /usr/local/filebeat/filebeat.yml

filebeat.inputs:
- type: log
  # Change to true to enable this input configuration.
  enabled: true

  # 可以设置多个被抓取的目录
  # 指定读取文件的位置
  paths:
    - /var/log/*.log
    - /data/logs/rpc/shop-rpc/*.log
  output.logstash:
    # The Logstash hosts
    hosts: ["10.3.2.4:12432"]

4）配置环境变量

vim /etc/profile.d/elk.sh

export PATH=$PATH:/usr/local/filebeat/

source /etc/profi