Docker日志管理之Filebeat+ELK日志管理

所需安装包及镜像

安装步骤

  1. 把所需镜像导入到Docker容器

  1. 打开/etc/sysctl.conf配置文件,添加参数

  1. 打开资源限制配置文件,添加参数

  1. 创建一个网络

  1. 在根目录下创建一个项目目录

创建Elasticsearch子目录

  1. 在项目目录下创建Elasticsearch子目录

  1. 将安装Elasticsearch的安装包拷贝到安装目录下

  1. 进入到安装目录下:cd elk/elasticsearch,并解压安装包
  2. 进入到安装目录下,找到配置文件,修改文件内容

  1. 修改配置文件内容

  1. 将修改好的配置文件拷贝到创建的项目目录的子目录下(方便写dockerfile文件的时候引用此文件)

  1. 创建dockerfile文件,添加文件内容

  1. 运行dockerfile文件,构建Elasticsearch镜像

创建kibana子目录(在elk项目目录下创建)

  1. 在elk项目目录下创建kibana的子目录

  1. 拷贝kibana的安装包到kibana的目录下

  1. 解压kibana的安装包
  2. 找到kibana的配置文件,修改参数

  1. 修改kibana.yml文件内容

  1. 将修改好的配置文件拷贝到项目的kibana目录下

  1. 创建dockerfile文件:vim dockerfile

  1. 运行dockerfile文件,构建kibana镜像

在elk项目下创建Logstash

  1. 在elk项目下创建Logstash目录

  1. 将所需要的Logstash安装包拷贝到Logstash目录下

  1. 先创建一个Logstash用于收集日志、发送日志的配置文件

文件内容是:

  1. 创建一个执行脚本,方便在dockerfile文件中引用脚本,执行Logstash程序
    1. 在同级目录下创建:vim run.sh
    2. 内容是:

  1. 创建dockerfile文件,添加内容

  1. dockerfile文件内容:

  1. 运行dockerfile文件,构建Logstash镜像

  1. 查看已创建的镜像,Logstash、Elasticsearch、kibana都已经创建成功

在elk项目下创建Filebeat目录

  1. 创建Filebeat目录

  1. 将Filebeat的安装包拷贝到当前目录下

  1. 创建Filebeat.yml配置文件

  1. 写一个执行脚本(方便在dockerfile当中调用)

  1. 在当前目录下写一个dockerfile文件

  1. 构建Filebeat镜像

启动nginx作为日志输入源

启动Filebeat+ELK日志收集环境

  1. 启动Elasticsearch

  1. 启动kibana

  1. 启动Logstash

  1. 启动Filebeat

  1. 访问192.168.10.101:5601,将会访问到kibana界面

Docker ELK是指使用Docker容器化技术搭建的ELK(Elasticsearch、Logstash和Kibana)日志分析平台。其中,FilebeatELK中的一个组件,用于收集和传输日志数据。 在使用Docker ELK搭建平台时,你可以通过执行命令"Docker run"来启动Filebeat容器。启动命令示例如下: ``` docker run -d -u root --name filebeat --net somenetwork -v /var/log/logapp:/var/log/logapp:rw -v /mydata/docker/filebeat/filebeat.yml:/usr/share/filebeat/filebeat.yml:ro elastic/filebeat:7.16.1 ``` 这个命令会在Docker中启动一个名为"filebeat"的容器,并将日志文件夹和配置文件夹挂载到容器中。 如果需要启动多个Filebeat容器,只需要指定不同的外挂地址即可,这样可以保持架构图的一致性。示例命令如下: ``` docker run -d --network elk-net --ip 172.22.1.5 --name=filebeat -v /mydata/filebeat/log/:/usr/share/filebeat/logs -v /mydata/filebeat/config/filebeat.yml:/usr/share/filebeat/filebeat.yml docker.elastic.co/beats/filebeat:7.4.2 ``` 这个命令会在Docker中启动一个名为"filebeat"的容器,并将日志文件夹和配置文件夹挂载到容器中。 要导入日志进行测试,你可以创建一个Filebeat配置文件filebeat.yml。可以使用以下命令创建配置文件: ``` touch /mydata/filebeat/config/filebeat.yml ``` 这个命令会在指定路径下创建一个名为filebeat.yml的配置文件。然后,你可以根据需要进行相应的配置,包括指定日志路径、过滤条件等。 综上所述,Docker ELK中的Filebeat是用于收集和传输日志数据的组件,在搭建平台时需要执行相应的启动命令,并可以通过创建配置文件来进行必要的配置。<span class="em">1</span><span class="em">2</span><span class="em">3</span> #### 引用[.reference_title] - *1* [docker安装elk + filebeat(版本:7.16.1)](https://blog.csdn.net/paidaxinga_/article/details/122210062)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] - *2* *3* [docker搭建elk+filebeat](https://blog.csdn.net/qq_31745863/article/details/129986232)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v93^chatsearchT3_2"}}] [.reference_item style="max-width: 50%"] [ .reference_list ]
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值