Filebeat 自动安装部署&amp；一键配置实现_filebeat安装

最后的话

最近很多小伙伴找我要Linux学习资料，于是我翻箱倒柜，整理了一些优质资源，涵盖视频、电子书、PPT等共享给大家！

资料预览

给大家整理的视频资料：

给大家整理的电子书资料：

如果本文对你有帮助，欢迎点赞、收藏、转发给朋友，让我有持续创作的动力！

网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。

需要这份系统化的资料的朋友，可以点击这里获取！

一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！

filebeat_install:
cmd.run:
- cwd: /tmp/{{PACKAGE}}
- names:
- /bin/bash install.sh
- require:
- cmd: filebeat_extract
- unless:
- test -d /etc/filebeat

copy_yml:
cmd.run:
- cwd: /etc/filebeat
- names:
- mv filebeat.yml filebeat.yml.bak
- require:
- cmd: filebeat_install
- unless:
- test -e /etc/filebeat/filebeat.yml.bak

filebeat_yml:
file.managed:
- name: /etc/filebeat/filebeat.yml
- source: salt://filebeat/filebeat.yml
- require:
- cmd: copy_yml
- template: jinja
- defaults:
server_name: {{ SERVICE_NAME }}
log_path: {{ LOG_PATH }}
- unless:
- test -e /etc/filebeat/filebeat.yml

filebeat_start:
cmd.run:
- name: systemctl start filebeat
- require:
- file: filebeat_yml
- unless:
- systemctl status filebeat

script_source:
file.managed:
- name: /etc/filebeat/append.sh
- source: salt://filebeat/append.sh
- onlyif:
- cmd: rpm -qi filebeat
- unless:
- test -e /etc/filebeat/append.sh

yml_append:
cmd.run:
- cwd: /etc/filebeat
- names:
- /bin/bash append.sh {{NEW_SERVICE_NAME}} {{NEW_LOG_PATH}}
- require:
- file: script_source

filebeat_restart:
cmd.run:
- name: systemctl restart filebeat
- require:
- cmd: yml_append

我们分别来看一下


## 脚本实现


### append.sh


append.sh


我们先来看一下append.sh


**append.sh脚本实现的功能就是判断新增的服务在配置文件里面是否存在，如果不存在的话就添加到配置文件里去，如果存在则不做任何操作**


首先对传进来的第一个参数——新增的服务标识进行 grep 过滤，来看一下当前配置文件里面是否有要新增的字段


$?表示执行grep $1 filebeat.yml返回的状态码，如果返回0则表示字段存在，返回非0表示字段不存在

grep $1 filebeat.yml

接着是一个条件判断：


1、如果配置文件里没有该服务标识（代表是新增的，状态码返回0），则使用 sed 将内容写入配置文件里面


（ $1表示传入shell脚本的第一个参数——服务标识，$2表示传入shell脚本的第一个参数——服务对应的完整日志路径）


2、如果配置文件里有该服务标识（代表是以前就有的，状态码返回非0），则输出提示语

#!/bin/bash
grep $1 filebeat.yml
if [ $? -eq 0 ]
then
echo “service is alreadty exist!”
else
sed -i '/filebeat.inputs:/a\

• type: log
  enabled: true
  encoding: utf-8
  tail_files: false
  paths:\
• ‘$2^{\prime }fields:log\_topic{:}^{\prime }${1}’\

’ filebeat.yml
fi

### install.sls


install.sls里面有两个功能逻辑：**首次安装部署和后续新增配置**


1、首次部署filebeat并修改filebeat配置文件，将需要监控的服务配置字段添加进去


2、后续有新增服务需要接入日志，则将服务标识和对应日志路径添加到filebeat配置文件里


脚本开头定义了五个变量，方便我们后续维护

{% set PACKAGE = ‘filebeat-7.1.1-linux-x86_64’ %}
{% set SERVICE_NAME = ‘nginx’ %}
{% set LOG_PATH = ‘/var/log/nginx/access.log’ %}
{% set NEW_SERVICE_NAME = ‘keepalived’ %}
{% set NEW_LOG_PATH = ‘/var/log/keepalived.log’ %}

首次安装：


* PACKAGE：filebeat安装包
* SERVICE\_NAME：服务标识
* LOG\_PATH：服务对应日志


后续新增：


* NEW\_SERVICE\_NAME：新增的服务标识
* NEW\_LOG\_PATH：新增的服务对应日志


在脚本开始执行之前，会对目标主机做一个判断，判断是否已经安装了filebeat，如果已经安装了则不走首次安装的逻辑，走后续新增的逻辑


如果没有安装则走首次安装的逻辑


如果目标主机已经安装了filebeat但不需要新增服务接入日志，但是还是走了一遍后续新增的逻辑，这是不影响的，因为在append.sh里面会有一个判断


**执行首次安装部署逻辑**

filebeat_source:
file.managed:
- name: /tmp/{{PACKAGE}}.tar.gz
- source: salt://filebeat/{{PACKAGE}}.tar.gz
- onlyif:
- cmd: rpm -qi filebeat && exit 127

PS：注意这里

• onlyif:
  • cmd: rpm -qi filebeat && exit 127

这段字段逻辑是在目标主机执行rpm -qi filebeat语句，检查是否已经安装过filebeat，如果没有安装则返回一个非0的状态码（这里我设成返回127）


然后onlyif字段是指返回非0就执行filebeat\_source:对应的内容，返回0就不执行


又因为下面的语句是依赖于filebeat\_source的，所以如果目标主机安装了filebeat，就不会执行filebeat\_source语句，也不会执行后面所依赖的语句


完整脚本如下：

filebeat_source:
file.managed:
- name: /tmp/{{PACKAGE}}.tar.gz
- source: salt://filebeat/{{PACKAGE}}.tar.gz
- onlyif:
- cmd: rpm -qi filebeat && exit 127

filebeat_extract:
cmd.run:
- cwd: /tmp
- names:
- tar zxf {{PACKAGE}}.tar.gz
- require:
- file: filebeat_source
- unless:
- test -d /tmp/{{PACKAGE}}

filebeat_install:
cmd.run:
- cwd: /tmp/{{PACKAGE}}
- names:
- /bin/bash install.sh
- require:
- cmd: filebeat_extract
- unless:
- test -d /etc/filebeat

copy_yml:
cmd.run:
- cwd: /etc/filebeat
- names:
- mv filebeat.yml filebeat.yml.bak
- require:
- cmd: filebeat_install
- unless:
- test -e /etc/filebeat/filebeat.yml.bak

filebeat_yml:
file.managed:
- name: /etc/filebeat/filebeat.yml
- source: salt://filebeat/filebeat.yml
- require:
- cmd: copy_yml
- template: jinja
- defaults:
server_name: {{ SERVICE_NAME }}
log_path: {{ LOG_PATH }}
- unless:
- test -e /etc/filebeat/filebeat.yml

filebeat_start:
cmd.run:
- name: systemctl start filebeat
- require:
- file: filebeat_yml
- unless:
- systemctl status filebeat

**执行后续新增逻辑**


我们来看下后续新增脚本的逻辑

script_source:
file.managed:
- name: /etc/filebeat/append.sh
- source: salt://filebeat/append.sh
- onlyif:
- cmd: rpm -qi filebeat
- unless:
- test -e /etc/filebeat/append.sh

开始执行之前会先在目标主机上执行rpm -qi filebeat语句，如果存在返回0，就会执行后面的语句




![](https://img-blog.csdnimg.cn/img_convert/9a8cb5f8c0ec69e6499adead0da6e95b.png)


最全的Linux教程，Linux从入门到精通

======================

1.  **linux从入门到精通(第2版)**

2.  **Linux系统移植**

3.  **Linux驱动开发入门与实战**

4.  **LINUX 系统移植 第2版**

5.  **Linux开源网络全栈详解 从DPDK到OpenFlow**



![华为18级工程师呕心沥血撰写3000页Linux学习笔记教程](https://img-blog.csdnimg.cn/img_convert/59742364bb1338737fe2d315a9e2ec54.png)



第一份《Linux从入门到精通》466页

====================

内容简介

====

本书是获得了很多读者好评的Linux经典畅销书**《Linux从入门到精通》的第2版**。本书第1版出版后曾经多次印刷，并被51CTO读书频道评为“最受读者喜爱的原创IT技术图书奖”。本书第﹖版以最新的Ubuntu 12.04为版本，循序渐进地向读者介绍了Linux 的基础应用、系统管理、网络应用、娱乐和办公、程序开发、服务器配置、系统安全等。本书附带1张光盘，内容为本书配套多媒体教学视频。另外,本书还为读者提供了大量的Linux学习资料和Ubuntu安装镜像文件，供读者免费下载。



![华为18级工程师呕心沥血撰写3000页Linux学习笔记教程](https://img-blog.csdnimg.cn/img_convert/9d4aefb6a92edea27b825e59aa1f2c54.png)



**本书适合广大Linux初中级用户、开源软件爱好者和大专院校的学生阅读，同时也非常适合准备从事Linux平台开发的各类人员。**

> 需要《Linux入门到精通》、《linux系统移植》、《Linux驱动开发入门实战》、《Linux开源网络全栈》电子书籍及教程的工程师朋友们劳烦您转发+评论




**网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。**

**[需要这份系统化的资料的朋友，可以点击这里获取！](https://bbs.csdn.net/topics/618635766)**

**一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！**

级用户、开源软件爱好者和大专院校的学生阅读，同时也非常适合准备从事Linux平台开发的各类人员。**

> 需要《Linux入门到精通》、《linux系统移植》、《Linux驱动开发入门实战》、《Linux开源网络全栈》电子书籍及教程的工程师朋友们劳烦您转发+评论




**网上学习资料一大堆，但如果学到的知识不成体系，遇到问题时只是浅尝辄止，不再深入研究，那么很难做到真正的技术提升。**

**[需要这份系统化的资料的朋友，可以点击这里获取！](https://bbs.csdn.net/topics/618635766)**

**一个人可以走的很快，但一群人才能走的更远！不论你是正从事IT行业的老鸟或是对IT行业感兴趣的新人，都欢迎加入我们的的圈子（技术交流、学习资源、职场吐槽、大厂内推、面试辅导），让我们一起学习成长！**