ELK集群配置安全认证

最新推荐文章于 2024-08-23 09:47:52 发布
最新推荐文章于 2024-08-23 09:47:52 发布
阅读量2.7k 收藏 8
点赞数
分类专栏： elk 文章标签： https elasticsearch ssl
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-NC-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_43334786/article/details/109481743
版权

一、生成证书

集群结构：

hostnameIP
es1192.168.1.5
es2192.168.1.6
es3192.168.1.7
kibana192.168.1.8
logstash192.168.1.15

1、创建ca证书

[elk@es1 elasticsearch]$ bin/elasticsearch-certutil ca
......
Please enter the desired output file [elastic-stack-ca.p12]: #此处可以不输入任何内容，使用默认的名称
Enter password for elastic-stack-ca.p12 : #此处输入密码，可以不输入

2、用上面创建的ca来给es1节点创建证书文件：

[elk@es1 elasticsearch]$ bin/elasticsearch-certutil cert --ca elastic-stack-ca.p12 --ip 192.168.1.5
......
Enter password for CA (elastic-stack-ca.p12) : #此处的密码是你上一步设置的密码
Please enter the desired output file [elastic-certificates.p12]: es1-certificates.p12 #注意命名规范
Enter password for es1-certificates.p12 : 

Certificates written to /app/elk/elasticsearch/es1-certificates.p12

3、同样创建es2的证书文件：

[elk@es1 elasticsearch]$ bin/elasticsearch-certutil cert --ca elastic-stack-ca.p12 --ip 192.168.1.6
......
Enter password for CA (elastic-stack-ca.p12) : 
Please enter the desired output file [elastic-certificates.p12]: es2-certificates.p12 #注意命名
Enter password for es1-certificates.p12 : 

Certificates written to /app/elk/elasticsearch/es2-certificates.p12

4、创建es3的证书文件：

[elk@es1 elasticsearch]$ bin/elasticsearch-certutil cert --ca elastic-stack-ca.p12 --ip 192.168.1.7
......
Enter password for CA (elastic-stack-ca.p12) : 
Please enter the desired output file [elastic-certificates.p12]: es3-certificates.p12 #注意命名
Enter password for es1-certificates.p12 : 

Certificates written to /app/elk/elasticsearch/es3-certificates.p12

5、生成logstash所需证书：

[elk@es1 elasticsearch]$ openssl pkcs12 -in elastic-stack-ca.p12 -clcerts -nokeys > logstash.cer
[elk@es1 elasticsearch]$ openssl x509 -in logstash.cer -out logstash.pem

6、生成后续kibana所需证书：

[elk@es1 elasticsearch]$ ./bin/elasticsearch-certutil cert --ca elastic-stack-ca.p12 -name "CN=something,OU=Consulting Team,DC=mydomain,DC=com"
......
Enter password for CA (elastic-stack-ca.p12) : 
Please enter the desired output file [CN=something,OU=Consulting Team,DC=mydomain,DC=com.p12]: client.p12
Enter password for client.p12 : 

Certificates written to /app/elk/elasticsearch/client.p12

二、配置ES集群：

1、拷贝证书到指定目录conf/cert下：

[elk@es1 elasticsearch]$ cp elastic-stack-ca.p12 config/cert/
[elk@es1 elasticsearch]$ cp es1-certificates.p12 config/cert/
[elk@es1 elasticsearch]$ scp elastic-stack-ca.p12 es2-certificates.p12 es2:/app/elk/elasticsearch/config/cert/
root@192.168.1.6's password: 
elastic-stack-ca.p12                                              100% 2527     1.2MB/s   00:00    
es2-certificates.p12                                              100% 3467     1.0MB/s   00:00    
[elk@es1 elasticsearch]$ scp elastic-stack-ca.p12 es3-certificates.p12 es3:/app/elk/elasticsearch/config/cert/
root@192.168.1.7's password: 
elastic-stack-ca.p12                                              100% 2527     1.2MB/s   00:00    
es3-certificates.p12                                              100% 3467     1.1MB/s   00:00

2、修改es1的配置文件：

xpack.security.enabled: true
xpack.security.transport.ssl.enabled: true
xpack.security.transport.ssl.verification_mode: certificate
xpack.security.transport.ssl.keystore.path: cert/es1-certificates.p12
xpack.security.transport.ssl.truststore.path: cert/elastic-stack-ca.p12

xpack.security.http.ssl.enabled: true
xpack.security.http.ssl.keystore.path:  cert/es1-certificates.p12
xpack.security.http.ssl.truststore.path:  cert/elastic-stack-ca.p12
xpack.security.http.ssl.client_authentication: optional

3、修改es2的配置文件：

xpack.security.enabled: true
xpack.security.transport.ssl.enabled: true
xpack.security.transport.ssl.verification_mode: certificate
xpack.security.transport.ssl.keystore.path: cert/es2-certificates.p12
xpack.security.transport.ssl.truststore.path: cert/elastic-stack-ca.p12

xpack.security.http.ssl.enabled: true
xpack.security.http.ssl.keystore.path:  cert/es2-certificates.p12
xpack.security.http.ssl.truststore.path:  cert/elastic-stack-ca.p12
xpack.security.http.ssl.client_authentication: optional

4、修改es3的配置文件：

xpack.security.enabled: true
xpack.security.transport.ssl.enabled: true
xpack.security.transport.ssl.verification_mode: certificate
xpack.security.transport.ssl.keystore.path: cert/es3-certificates.p12
xpack.security.transport.ssl.truststore.path: cert/elastic-stack-ca.p12

xpack.security.http.ssl.enabled: true
xpack.security.http.ssl.keystore.path:  cert/es3-certificates.p12
xpack.security.http.ssl.truststore.path:  cert/elastic-stack-ca.p12
xpack.security.http.ssl.client_authentication: optional

5、重启所有ES节点

[elk@es1 elasticsearch]$ bin/elasticsearch -d

6、重启完成后，访问http://192.168.1.5:9200/_cat/health?v，可以看到要求输入用户名密码。

而此时我们还没设置密码，下面开始设置密码（注意：设置密码的时候，ES必须是启动状态）：

[elk@es1 ~]$ cd /usr/share/elasticsearch/bin
[elk@es1 bin]$ ./elasticsearch-setup-passwords interactive
Initiating the setup of passwords for reserved users elastic,apm_system,kibana,logstash_system,beats_system,remote_monitoring_user.
You will be prompted to enter passwords as the process progresses.
Please confirm that you would like to continue [y/N]y


Enter password for [elastic]: 
Reenter password for [elastic]: 
Enter password for [apm_system]: 
Reenter password for [apm_system]: 
Enter password for [kibana]: 
Reenter password for [kibana]: 
Enter password for [logstash_system]: 
Reenter password for [logstash_system]: 
Enter password for [beats_system]: 
Reenter password for [beats_system]: 
Enter password for [remote_monitoring_user]: 
Reenter password for [remote_monitoring_user]: 
Changed password for user [apm_system]
Changed password for user [kibana]
Changed password for user [logstash_system]
Changed password for user [beats_system]
Changed password for user [remote_monitoring_user]
Changed password for user [elastic]

可以看到，我们修改了6个用户的密码，设置完成后，再次访问http://192.168.1.3:9200/_cat/health?v，输入用户名elastic，密码123456，就能看到集群健康状态了。

三、配置kibana

1、上面我们在es1上给kibana创建了一个证书client.p12，现在发送到kibana的config目录下：

[root@es1 elasticsearch]# scp client.p12 kibana:/app/elk/kibana/config/

2、利用client.p12证书生成其他所需证书：

#
[elk@localhost config]$ openssl pkcs12 -in client.p12 -clcerts -nokeys > client.cer
Enter Import Password:
MAC verified OK
#client-ce.cer为kibana安全认证使用
[elk@localhost config]$ openssl pkcs12 -in client.p12 -cacerts -nokeys -chain > client-ca.cer
Enter Import Password:
MAC verified OK
#下面的server.crt和server.key是给kibana启用ssl访问使用
[elk@localhost config]$ openssl req -newkey rsa:2048 -nodes -keyout server.key -x509 -days 3650 -out server.crt -subj "/C=CN/ST=tj/L=tj/O=sgcc/OU=elk/"
Generating a 2048 bit RSA private key
...........+++
.............................+++
writing new private key to 'server.key'
-----

3、修改Kibana配置文件：

[root@kibana ~]# vim /etc/kibana/kibana.yml 
server.port: 5601
server.host: "192.168.1.8"
server.name: "kibana"
elasticsearch.hosts: ["https://192.168.1.5:9200","https://192.168.1.6:9200","https://192.168.1.7:9200"]
i18n.locale: "zh-CN"
#下面为安全配置
xpack.security.enabled: true
elasticsearch.username: "elastic"
elasticsearch.password: "123456"
elasticsearch.ssl.certificateAuthorities: config/client-ca.cer
elasticsearch.ssl.verificationMode: certificate
xpack.security.encryptionKey: "4297f44b13955235245b2497399d7a93"
xpack.reporting.encryptionKey: "4297f44b13955235245b2497399d7a93"
server.ssl.enabled: true
server.ssl.certificate: config/server.crt
server.ssl.key: config/server.key

3、给上面的证书文件调整权限，保证我们启动kibana的用户对该文件有读取权限：

[root@kibana ~]# chown -R elk:elk /app

然后重启Kibana，重新访问https://192.168.1.8:5601：
在这里插入图片描述此时输入用户名elastic和密码123456即可登录。

四、logstash配置

这是因为我们的logstash的配置文件output部分是输出到ES集群的，我们刚刚给ES集群设置了安全认证，所以现在logstash的配置文件也要添加相关配置：

1、同样先把es上生成的client.crt.pem证书cp到logstash的config目录下：

[root@es1 elasticsearch]# scp logstash.pem logstash:/app/elk/logstash/config/

2、修改logstash配置文件：

node.name: logstash
pipeline.id: logstash
pipeline.workers: 3
pipeline.batch.size: 5000
pipeline.batch.delay: 200
http.host: "0.0.0.0"
http.port: 19600-19700
xpack.monitoring.enabled: true
xpack.monitoring.elasticsearch.username: elastic
xpack.monitoring.elasticsearch.password: "123456"
xpack.monitoring.elasticsearch.hosts: ["https://192.168.1.5:9200", "https://192.168.1.6:9200", "https://192.168.1.7:9200"]
xpack.monitoring.elasticsearch.ssl.certificate_authority: config/logstash.pem
xpack.monitoring.elasticsearch.ssl.verification_mode: certificate

3、在output部分配置ES集群的用户名、密码和证书：

output {
    elasticsearch {
	hosts => ["https://192.168.1.5:9200", "https://192.168.1.6:9200", "https://192.168.1.7:9200"]
	index => "elk-heartbeat"
        user  => "elastic"
        password => "123456"
        ssl => true
        cacert => "/app/elk/logstash/config/logstash.pem"
    }
}

配置完成后，再次启动logstash，可以正常启动了。

nginx安装（离线安装，新增--with-http_ssl_module、--with-stream模块，离线升级）
qq_36305027的博客
09-28 2202
​ 如果执行上面的查看版本信息没有内容输出，需要执行下面指令安装。​ **第一步：**下载nginx并上传到服务器解压。​ 重新启动nginx，发现控制台输出报错，提示需要。模块，我们进到nginx解压后的目录，执行下面操作,发现会报错需要。​ **第一步：**检查环境，分别执行。模块，我们进到nginx解压后的目录，执行下面操作。​ **第三步：**启动nginx。​ **第四步：**安装zlib。
安全认证系列之-双向认证服务搭建
weinichendian的博客
03-12 617
一.双向认证服务介绍 安全认证系列-（一）https 单向认证和双向认证原理 单向认证是客户端根据ca根证书验证服务端提供的服务端证书和私钥；双向认证还要服务端根据ca根证书验证客户端证书和私钥，因此双向认证之前还需要生成客户端证书和私钥。 二.客户端证书生成 生成客户端证书的方式基本与生成服务端的方式一致，唯一区别就是证书的申请机构不同。 1）生产客户端密钥 openssl genrsa -des3 -out client.key 1024 2）生成客户端证书签名请求 需要注意的是，
ELK进阶-安全认证设置流程介绍
最新发布
Young_深情不及里子的博客
08-23 1605
在数字化转型的浪潮中，企业对于数据的依赖日益增强，而日志数据作为业务运行的“脉络图”，其重要性不言而喻。ELFK（Elasticsearch, Logstash, Filebeat, Kibana）作为一套强大的日志监控系统，为企业提供了从数据采集、处理到可视化的完整解决方案。然而，随着数据价值的提升，安全问题也日益凸显，如何在享受ELFK带来的高效与便捷的同时，确保数据的安全与合规，成为了企业必须面对的挑战。安全认证，作为守护数据安全的第一道防线，其在ELFK系统中的必要性不容忽视。
nginx安装ssl模块http_ssl_module
weixin_44371237的博客
01-25 1092
若出现“–with-http_ssl_module”说明已经安装过，否则继续执行下列步骤。再执行如下命令（这里一定不要执行make install,否则会覆盖掉原来的nginx）执行覆盖命令(先停止nginx,./nginx -s stop)用新的nginx覆盖旧的（会多一个objs文件夹）OpenSSL library错误。如果组件linux缺少，参考如下。PCRE library错误。查看nginx安装的模块。进入nginx源文件目录。
nginx安装http_ssl_module模块
zhang_130914036的博客
08-01 3724
nginx安装http_ssl_module模块
nginx添加http_ssl_module模块、nginx配置https、nginx配置ws、nginx配置wss
又逢乱世
08-06 6484
nginx添加http_ssl_module模块、nginx配置https、nginx配置ws、nginx配置wss
【基础篇】Nginx安装 SSL模块、配置 HTTPS详细步骤
热门推荐
打怪升级
08-25 1万+
nginx
ELK集群搭建(基础教程)
lqcbj的博客
01-30 3157
ELK集群搭建(基础教程) 目录： 机器准备 集群内各台机器安装Elasticsearch 安装部署Kafka（注：每个节点都配置，注意ip不同） 安装logstash工具 安装filebeat ELK收集Nginx的json日志 ELK收集Nginx正常日志和错误日志 ELK收集Tomcat日志 ELK收集docker日志 配置filebeat收集单个docker日志 modules日志收集 使用redis作为缓存收集日志 使用Kafka做缓存收集日志
elk集群部署手册
08-22
这个集群部署手册将详细介绍如何构建和配置ELK集群，以便有效地处理、解析、存储和展示大量日志数据。 ### Elasticsearch 部署 1. **安装与配置**：首先，你需要在服务器上安装Elasticsearch。确保选择与操作系统...
ELK集群 8.13.2版本
惊云
06-19 1177
很多文档都是千篇一律，没有实际验证，此次是实录相关的守程，亲测笔录
（九）elasticsearch集群的安全认证模式
Spider_xiaoma的博客
11-22 1007
2019年5月21日，Elastic官方发布消息： Elastic Stack 新版本6.8.0 和7.1.0的核心安全功能现免费提供。 这意味着用户现在能够对网络流量进行加密、创建和管理用户、定义能够保护索引和集群级别访问权限的角色，并且使用 Spaces 为 Kibana提供全面保护。 免费提供的核心安全功能如下： 1）TLS 功能。 可对通信进行加密； 2）文件和原生 Realm。 可用于创建和管理用户； 3）基于角色的访问控制。 可用于控制用户对集群 API 和索引的访问权限； 通过针对 Kiban
elasticsearch集群安装+安全验证+kibana安装
m0_60635001的博客
03-14 1015
本人面试腾讯，阿里，百度等企业总结下来的面试经历，都是真实的，分享给大家！本人面试腾讯，阿里，百度等企业总结下来的面试经历，都是真实的，分享给大家！[外链图片转存中…(img-t9beFpr9-1710347497149)][外链图片转存中…(img-yc4vn5eZ-1710347497150)][外链图片转存中…(img-iigLRHyq-1710347497150)][外链图片转存中…(img-9R368t1L-1710347497150)]
nginx安装http_ssl_module
小李李
09-26 432
一、查看已安装的模块 [root@server-bd58aaeb-ac6f-49cb-963a-4d1f1318f4da sbin]# ./nginx -V nginx version: nginx/1.16.1 built by gcc 4.8.5 20150623 (Red Hat 4.8.5-39) (GCC) built with OpenSSL 1.0.2k-fips 26 Ja...
ELK集添加安全认证
Jerry杰的博客
09-01 1997
ElasticSearch 默认都是无密码登录，所有人都可以登录操作，安全考虑可以设置密码认证。6.2或更早版本需要安装X-PACK，新版本已包含在发行版中，所以可以直接在 ELK 上进行配置。
nginx重新编译添加ssl模块--with-http_ssl_module
03-16 1万+
找到安装nginx的源码根目录，如果没有的话下载新的源码 http://nginx.org tar xvzf nginx-1.3.2.tar.gz 查看ngixn版本极其编译参数 /usr/local/nginx/sbin/nginx -V 进入nginx源码目录 cd nginx-1.3.2 以下是重新编译的代码和模块 ./configure --prefix=/usr/loca...
Nginx虚拟主机、Nginx模块的安装使用（加密模块--with-http_ssl_module）
Reyn_观极
03-12 3331
一，Nginx虚拟主机（一个nginx实现多个网站） 1，基于域名的虚拟主机 1）修改Nginx服务配置，添加相关虚拟主机配置如下 # vim /usr/local/nginx/conf/nginx.conf .. .. server { listen 80; ...
Nginx服务器上安装SSL证书
冲出仁川，走出马德里，故事还会再继续
02-03 6192
打开Nginx安装目录 > conf文件夹 > nginx.conf文件，在nginx.conf文件中找到以下属性。在nginx的安装目录创建cert文件夹，并将下载的证书文件，和密钥文件拷贝到。我自己用的百度云的免费SSL证书，下载证书，这里格式选择PEM_Nginx。这里我创建到了nginx/conf下面了，这是试了好几次报错后的结果。证书安装完成后，可通过登录证书绑定域名的方式验证证书是否安装成功。如果网页地址栏出现绿色小锁标志，表示证书安装成功。进入nginx安装目录执行如下命令。
企业运维实战 ELK日志分析平台 Kinaba （Kibana安装、Kinaba安全认证、Kinaba监测）
08-11
Kibana 安全认证是通过 xpack 安全验证来实现的。首先，需要创建证书，然后将证书传给集群其他节点。在所有节点上，需要配置 xpack 安全验证，包括启用 SSL、设置证书路径和密码等。最后，需要重启 Elasticsearch ...
ELK安装配置学习笔记
glisten0317的博客
08-30 1216
ELK（filebeat、logstash、elasticsearch和kibana）的安装配置，监控nginx日志
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Dustin.Hoffman

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值