日志系统的设计与实现_最新Ansible实现ELK日志系统的部署（ES：7.9）

系统部署完成时间：2020/11月

各软件版本说明：

Ansible版本： ansible 2.9.10

操作系统版本： CentOS release 7.8

ELK日志架构：Filebeat+Kafka+Zookeeper+Logstash+Elasticsearch+Kibana

elastic stack各组件版本为：7.9.2

zookeeper版本：apache-zookeeper-3.6.2

kafka版本：kafka_2.13-2.6.0

各组件服务器数量说明：

ES Master节点数：3台

ES Node节点数：3台

Kafka+Zookeeper: 3台

Kibana: 2台

Ansible：2台(1台备份)

Logstash:2台(根据自己情况来定)

一，首先实现ansible的部署

1)部署anbile软件，并实现对各个节点的ssh信任，实现无密码链接

2)anbile采用role机制对各服务实现部署

如下所示：base目录是通用配置，例如各个服务器的时间同步，dns配置，基础软件安装等等

各个目录结构如图所示(roles的规范结构),当然也有几个目录没有用到，主要还是tasks,files,handlers以及templates目录，变量均配置在了/etc/ansible/group_vars/all 全局变量当中了：

主要配置的是tasks/main.yml文件，本次部署所有配置文件均写在了这一个文件当中：

如下所示：

最后入口配置文件site.yml

所有配置好后，通过ansible进行安装部署服务操作：

ansible-playbook site.yml -t esmaster

部署完成之后的ELK日志系统：

elk日志系统配置了xpack,可以实现不同的用户进行登录并做权限的控制：

因为涉及到东西较多，这里并没有详细的罗列出来，当然期间也碰到过一些问题，包括部署期间以及系统运行之后，如果有感兴趣的朋友或者有正在部署日志系统的朋友，欢迎一起交流！