ES（EFK）日志分析系统 centos/redhat 部署流程（不用logstash）

最新推荐文章于 2024-09-12 19:48:45 发布

三头六臂的小白

最新推荐文章于 2024-09-12 19:48:45 发布

阅读量428

点赞数

分类专栏： linux小技巧文章标签： elasticsearch 大数据后端

本文链接：https://blog.csdn.net/bf96163/article/details/109842896

版权

19 篇文章 0 订阅

订阅专栏

ES（EFK）日志分析系统 centos/redhat部署流程

使用的是centos6.5 系统部署其中大部分内容 centos都适用 chkconfig这块可能有不同的地方可以用其他方式将服务加入到service中。

下载相关软件的安装文件—— RPM格式可以到elasitc官网去下载

1. 安装 elasticsearch：

1.1 启用密码:

xpack.security.enable: true (注意冒号后面有空格)

discovery.type: single-node (根据需要修改本设置适用于ES和KIBANA在同一台服务器的简单情况)

./elasticsearch-setup-passwords interactive 开启密码交互设置设置各个账号的密码

1.2 常用配置：

在 /etc/elaticsearch/elaticsearch.yml中的

1. es的index（可以理解成表）数据及其他数据存储路径 path.data: （注意如果是运行后修改需要将原来的数据拷贝到新的位置后再运行，否则部分数据会有冲突导致kibana或者自身启动失败）

2. es的自身log存储位置 path.logs:

3.内存设置在同目录的 jvm.options 其中的 Xms4g 和 Xmx4g 前面的#注释去掉就是设置其内存的方法具体值调整数据

4. 公网访问设置 network.host: 0.0.0.0 (设置网域)

2.安装 kibana ：

使用命令 rpm --install kibana-x.x.x-x86-64.rpm 安装 kibana chkconfig --add kibana加入到service 中
配置YML文件在 /etc/kibana/kibana.yml中

2.1设置密码

明文方式（安全性低）可以在 /etc/kibana/kibana.yml 里面直接设置 elasticsearch.username 和 elasticsearch.password的值
非明文方式（安全性高）到/usr/share/kibana/bin目录下使用如下三个命令设置kibana访问es的密码

./kibana-keystore create

./kibana-keystore add elasticsearch.username （会出现交互设置）

./kibana-keystore add elasticsearch.password（会出现交互设置）

设置好密后重启kibana就可以了

进入目标IP：5601/status 来登陆（启动需要一定时间）

2.3 设置其他用户和用用户 elastic 和密码登陆 kibana 进入 Stack Management>Security>Users 图形界面操作

3 Filebeat 安装配置

3.1 安装 rpm -vi filebeat-7.9.3-x86_64.rpm 用 chkconfig --add fielbeat 加入到service 中

3.2 配置 filebeat.yml 中的（这部分是配置filebeat 跟ES主机链接的部分）

         output.elasticsearch:
            hosts: ["myEShost:9200"]
            username: "filebeat_internal"
            password: "YOUR_PASSWORD"

3.2.2 配置KIBANA （ES与 kibana同一台主机时可以省略此部分）

         setup.kibana:
            host: "mykibanahost:5601"
            username: "my_kibana_user" (使用上面的密码或者自定义)
            password: "{pwd}"