【elasticsearch】elasticsearch8.0.1使用rpm包安装并启用TLS

已于 2023-10-10 09:42:02 修改
阅读量528 收藏
点赞数
分类专栏： elasticsearch 文章标签： elasticsearch
于 2023-10-09 16:39:24 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/margu_168/article/details/133344675
版权

背景

公司的业务需要在加密的情况下使用，为此，研究测试了一下es8是如何启用TLS的。以下是测试使用过程。

x-pack了解

在 Elasticsearch 7.11.0 版本及更高版本中，X-Pack 功能在默认情况下已经整合到 Elastic Stack 的各个组件中，并且具有不同的名称和许可证。以下是 Elastic Stack 中一些主要的 X-Pack 功能和对应的新名称：

  • 安全性（Security）：提供了身份验证、授权、加密通信和安全审计等功能，用于保护 Elasticsearch 和 Kibana 的访问和数据安全。

  • 警报（Alerting）：用于配置和管理警报规则，当符合特定条件时，发送通知、触发操作或运行自定义脚本。

  • 监控（Monitoring）：提供了集群健康状况、节点性能和资源使用情况等实时监控指标，以及用于可视化和分析的监控仪表板。

  • 报告（Reporting）：用于生成漂亮的报表和可视化图表，支持将报告导出为 PDF、CSV 或 PNG 格式，并支持计划定期生成和发送报告。

  • 图形探索（Graph Exploration）：用于分析和可视化数据之间的关系，帮助发现隐藏的模式和连接。

  • 机器学习（Machine Learning）：提供了强大的机器学习功能，用于自动检测异常、预测趋势和进行故障检测。

请注意，具体的功能和名称可能会随着 Elastic Stack 版本的更新而有所变化，请参考官方文档以获取最新的信息和功能详细说明。

基本知识

1、默认情况下，服务器将使用两个端口进行通讯，9200与9300：

  • 9200，用于http通讯，各类restful客户端，例如kibana，浏览器直接访问、agent等等需要通过该端口与服务器连接。
  • 9300，用于elasticsearch服务器集群内各服务器节点间的通讯。

2、如果首次使用yum或者rpm按装elasticsearch服务器，安装程序会自动进行安全配置，并生成几个安全配置需要的文件，如ca的keystore、用于http加密通讯的keystore(http.p12)等，这些最好保留下来，当然，我们也可以用它提供的证书工具在后面自行创建。注意，如果不是首次安装，而又希望系统再次自动生成安全配置，需要先把/var/lib/elasticsearch里的东西删除干净。

3、通过自动安全配置生成的几个文件会放在/usr/share/elasticsearch下：

  • elastic-stack-ca.p12 keystore文件，存储了ca的公共证书及用于签发其他证书的密钥。（默认没有这个文件，可以自己手动生成）
  • transport.p12 包含了传输层密钥和证书，用于elasticsearch节点间加密通讯。
  • http.p12 这个keystore存储着http加密通讯需要的证书和密钥。
  • http_ca.crt 证书文件，用于集群内的http通讯加密。

es安装

环境介绍

单台 centos7部署单节点elasticsearch8.0.1

下载安装

elasticsearch中文下载地址：https://elasticsearch.cn/download/
选择自己需要的版本（windows、Linux、mac等），但需要注意不同版本之间的区别，我此次使用es 8.0.1的rpm包进行测试。

#rpm包下载
[root@k8s-m2 ~]# wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-8.0.1-x86_64.rpm
#直接使用rpm安装
warning: elasticsearch-8.0.1-x86_64.rpm: Header V4 RSA/SHA512 Signature, key ID d88e42b4: NOKEY
Preparing...                          ################################# [100%]
Creating elasticsearch group... OK
Creating elasticsearch user... OK
Updating / installing...
   1:elasticsearch-0:8.0.1-1          ################################# [100%]
warning: ignoring JAVA_HOME=/opt/jdk1.8.0_65; using bundled JDK
warning: ignoring JAVA_HOME=/opt/jdk1.8.0_65; using bundled JDK
--------------------------- Security autoconfiguration information ------------------------------

Authentication and authorization are enabled.
TLS for the transport and HTTP layers is enabled and configured.

The generated password for the elastic built-in superuser is : =GAe2y2Rqi0mvxjFMDZk

If this node should join an existing cluster, you can reconfigure this with
'/usr/share/elasticsearch/bin/elasticsearch-reconfigure-node --enrollment-token <token-here>'
after creating an enrollment token on your existing cluster.

You can complete the following actions at any time:

Reset the password of the elastic built-in superuser with 
'/usr/share/elasticsearch/bin/elasticsearch-reset-password -u elastic'.

Generate an enrollment token for Kibana instances with 
 '/usr/share/elasticsearch/bin/elasticsearch-create-enrollment-token -s kibana'.

Generate an enrollment token for Elasticsearch nodes with 
'/usr/share/elasticsearch/bin/elasticsearch-create-enrollment-token -s node'.

-------------------------------------------------------------------------------------------------
### NOT starting on installation, please execute the following statements to configure elasticsearch service to start automatically using systemd
 sudo systemctl daemon-reload
 sudo systemctl enable elasticsearch.service
### You can start elasticsearch service by executing
 sudo systemctl start elasticsearch.service
warning: ignoring JAVA_HOME=/opt/jdk1.8.0_65; using bundled JDK
warning: ignoring JAVA_HOME=/opt/jdk1.8.0_65; using bundled JDK```

正常情况下，该版本的安装会出现以上的一些信息，如果没有，可能是由于不是第一次安装有之前遗留下的一些文件。仔细查看上面的输出信息说明，默认情况下认证已经启用并配置好，节点的加入方式，密码重置，token的生成等。

环境调整
由于es服务需要服务器调整连接数，修改limits.conf文件，如下：

vim /etc/security/limits.conf  
* soft nofile 655350
* hard nofile 655350

调整vm.max_map_coun，检查当前的 vm.max_map_count 值：如果当前的值小于 262144，需要调整。否则，如果当前的值已经达到或超过 262144，那么可以不进行任何更改，当然也可以适量调大一点。

[root@k8s-m2 ~]# sysctl vm.max_map_count
[root@k8s-m2 ~]# echo "vm.max_map_count=655360" >> /etc/sysctl.conf 
[root@k8s-m2 ~]# sysctl -p

jvm使用内存大小调整，默认情况下，es配置使用的是-Xms4g和-Xmx4g，可以按照自己所需进行调整。

启动

[root@k8s-m2 opt]# systemctl start elasticsearch.service
[root@k8s-m2 opt]# systemctl status  elasticsearch
● elasticsearch.service - Elasticsearch
   Loaded: loaded (/usr/lib/systemd/system/elasticsearch.service; disabled; vendor preset: disabled)
   Active: active (running) since Mon 2023-10-09 10:44:39 CST; 20min ago
     Docs: https://www.elastic.co
 Main PID: 24259 (java)
    Tasks: 96
   Memory: 4.4G
   CGroup: /system.slice/elasticsearch.service
           ├─24259 /usr/share/elasticsearch/jdk/bin/java -Xshare:auto -Des.networkaddress.cache.ttl=60 -Des.networkaddress.cache.negative.ttl=10 -Djava.security.manager=allow -XX:+AlwaysPreTouch -Xss1m -Djava.awt.headless=true -Dfile...
           └─24694 /usr/share/elasticsearch/modules/x-pack-ml/platform/linux-x86_64/bin/controller

Oct 09 10:44:12 k8s-m2 systemd[1]: Starting Elasticsearch...
Oct 09 10:44:39 k8s-m2 systemd[1]: Started Elasticsearch.
[root@k8s-m2 opt]#

常用命令说明

使用yum或者rpm安装时，和es相关的命令存放在/usr/share/elasticsearch/bin目录

#elastic用户命令重置，其他用户类似指定
[root@k8s-m2 opt]# /usr/share/elasticsearch/bin/elasticsearch-reset-password -u elastic 
#默认生成证书时配置的密码等信息
[root@k8s-m2 opt]# /usr/share/elasticsearch/bin/elasticsearch-keystore list
warning: ignoring JAVA_HOME=/opt/jdk1.8.0_65; using bundled JDK
autoconfiguration.password_hash
keystore.seed
xpack.security.http.ssl.keystore.secure_password
xpack.security.transport.ssl.keystore.secure_password
xpack.security.transport.ssl.truststore.secure_password
#查看具体某项配置的密码
[root@k8s-m2 opt]# /usr/share/elasticsearch/bin/elasticsearch-keystore show xpack.security.http.ssl.keystore.secure_password
warning: ignoring JAVA_HOME=/opt/jdk1.8.0_65; using bundled JDK
0w9Z7YiEQG2rMWprA-8rYQ
#修改具体某项的密码，如果之前已经设置，可以覆盖
[root@k8s-m2 opt]# /usr/share/elasticsearch/bin/elasticsearch-keystore add xpack.security.http.ssl.keystore.secure_password

#命令行检查
[root@k8s-m2 certs]# curl --cacert http_ca.crt -u elastic:=GAe2y2Rqi0mvxjFMDZk  -XGET "https://192.168.2.141:9200/"
{
  "name" : "k8s-m2",
  "cluster_name" : "elasticsearch",
  "cluster_uuid" : "v5HBM6ACRiy31DBZmSa58g",
  "version" : {
    "number" : "8.0.1",
    "build_flavor" : "default",
    "build_type" : "rpm",
    "build_hash" : "801d9ccc7c2ee0f2cb121bbe22ab5af77a902372",
    "build_date" : "2022-02-24T13:55:40.601285296Z",
    "build_snapshot" : false,
    "lucene_version" : "9.0.0",
    "minimum_wire_compatibility_version" : "7.17.0",
    "minimum_index_compatibility_version" : "7.0.0"
  },
  "tagline" : "You Know, for Search"
}

#更多选项查看，按自己所需查看
[root@k8s-m2 certs]# curl --cacert http_ca.crt -u elastic:=GAe2y2Rqi0mvxjFMDZk  -XGET "https://192.168.2.141:9200/_cat"
=^.^=
/_cat/allocation
/_cat/shards
/_cat/shards/{index}
/_cat/master
/_cat/nodes
/_cat/tasks
/_cat/indices
/_cat/indices/{index}
/_cat/segments
/_cat/segments/{index}
/_cat/count
/_cat/count/{index}
/_cat/recovery
/_cat/recovery/{index}
/_cat/health
/_cat/pending_tasks
/_cat/aliases
/_cat/aliases/{alias}
/_cat/thread_pool
/_cat/thread_pool/{thread_pools}
/_cat/plugins
/_cat/fielddata
/_cat/fielddata/{fields}
/_cat/nodeattrs
/_cat/repositories
/_cat/snapshots/{repository}
/_cat/templates
/_cat/ml/anomaly_detectors
/_cat/ml/anomaly_detectors/{job_id}
/_cat/ml/trained_models
/_cat/ml/trained_models/{model_id}
/_cat/ml/datafeeds
/_cat/ml/datafeeds/{datafeed_id}
/_cat/ml/data_frame/analytics
/_cat/ml/data_frame/analytics/{id}
/_cat/transforms
/_cat/transforms/{transform_id}

kibana连接加密的es

kibana下载安装

[root@k8s-m2 opt]# wget https://artifacts.elastic.co/downloads/kibana/kibana-8.0.1-x86_64.rpm
[root@k8s-m2 opt]# rpm -ivh kibana-8.0.1-x86_64.rpm

生成kibana需要的相关证书

注意在这过程中要输入密码，具体密码为上面/usr/share/elasticsearch/bin/elasticsearch-keystore show xpack.security.http.ssl.keystore.secure_password查看到的密码。

[root@k8s-m2 certs]# pwd
/etc/elasticsearch/certs
[root@k8s-m2 certs]# ll
-rw-rw---- 1 root elasticsearch 1915 Oct  9 09:57 http_ca.crt
-rw-rw---- 1 root elasticsearch 9981 Oct  9 09:57 http.p12
-rw-rw---- 1 root elasticsearch 5822 Oct  9 09:57 transport.p12

# Private Key 私钥
[root@k8s-m2 certs]# openssl pkcs12 -in http.p12 -nocerts -nodes > client.key
# Public Certificate 公共证书
[root@k8s-m2 certs]# openssl pkcs12 -in http.p12 -clcerts -nokeys > client.cer
# CA Certificate 签署公共证书的CA
[root@k8s-m2 certs]# openssl pkcs12 -in http.p12 -cacerts -nokeys -chain > client-ca.cer

[root@k8s-m2 certs]# mkdir /etc/kibana/config/
[root@k8s-m2 certs]# cp /etc/elasticsearch/certs/client* /etc/kibana/config/

主要配置修改

注意：使用的是kibana账户，密码不知道可以用elasticsearch-reset-password（/usr/share/elasticsearch/bin/elasticsearch-reset-password -u kibana）命令进行重置。

server.port: 5601
server.host: "192.168.2.141"
server.publicBaseUrl: "http://192.168.2.141:5601" #最好添加上
elasticsearch.username: "kibana"
elasticsearch.password: "THR__INXYkH_lLCO3vV1"
elasticsearch.ssl.certificate: /etc/kibana/config/client.cer   #相关路径最好写绝对路径
elasticsearch.ssl.key: /etc/kibana/config/client.key
elasticsearch.ssl.certificateAuthorities: /etc/kibana/config/client-ca.cer
elasticsearch.ssl.verificationMode: certificate

kibana启动并检查

[root@k8s-m2 opt]# systemctl start kibana
[root@k8s-m2 opt]# systemctl status kibana -l
#如果kibana异常，可以查看日志进行排查
[root@k8s-m2 opt]# tail -f  /var/log/kibana/kibana.log

kibana访问

使用上面配置的服务器IP+5601地址进行访问。
在这里插入图片描述
账号为elastic，密码为es启动时输出到界面的密码。当然不记得也可以进行修改。

更多关于elasticsearch的知识分享，请前往博客主页。编写过程中，难免出现差错，敬请指出

margu_168
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
elasticsearch-6.8.1.rpm
09-10
elasticsearch-6.8.1.rpm
rpm 安装ElasticSearch
qq_26900081的博客
09-14 3423
源码安装：https://blog.csdn.net/qq_26900081/article/details/107913734 Java_JDK版本:11.0.8 ElasticSearch版本：7.8.1 ElasticSearch下载地址：https://www.elastic.co/cn/downloads/elasticsearch 1、创建文件夹：mkdir /usr/local/elasticsearch cd/usr/...
第三篇 Elasticsearch 安装 - RPM方式
Right_ydd的博客
03-20 953
学习使用yum、rpm或者离线安装的方式安装Elasticsearch
龙蜥anolis8.8安装部署elasticsearch
weixin_45251630的博客
11-23 227
龙蜥anolis8.8安装部署elasticsearch。
最新elasticsearch 8.0 安装配置
mcfeng007的博客
05-18 872
修改配置文件elasticsearch.yml: cluster.name: elasticsearch node.name: node-1 node.attr.rack: r1 path.data: /home/$USER/app/elasticsearch-8.0.1/data/ path.logs: /home/$USER/app/elasticsearch-8.0.1/logs/ network.host: 192.168.171.51 http.port: 9201 transport.pro
php安装部署elasticsearch流程
lschuangye的博客
03-17 3297
php接入elasticsearch，linux环境下安装elasticsearch的流程和常见问题解决办法。
【ES实战】Elasticsearch6.7的安装部署卸载-RPM方式
coding and writing
12-10 3746
ES的安装部署
Elasticsearch：使用 RPM 安装包来安装 Elastic Stack 8.x
Elastic 中国社区官方博客
04-12 4706
在我之前的文章 “Elasticsearch: 使用 Debian 安装包来安装 Elasticsearch 8.x”，我详述了如何使用 RPM 安装包来安装 Elasticsearch 8.x。后来有些开发者来问如何使用 RPM 安装包来安装 Elasticsearch。在今天的文章中，我来详述如何使用 RPM 安装包来安装 Elastic Stack 8.x。
Elasticsearch服务部署-基于rpm包部署
Flj12138的博客
11-03 373
(2)确保停止服务完成，可以执行"ss -ntl"查看监听端口是否存在或者是查看java。# 指定当前集群的服务发现节点，如果是单点的话，只需要指定本机的IP地址即可。# 指定服务监听的IP地址，如果设置为"0.0.0.0"表示监听的所有网卡。2.0 如果复用单点的环境，则需要先停止服务并清空数据。# 指定ES集群初始化master选举的初始节点。1.ElasticSearch的rpm单点部署。2.ElasticSearch的rpm集群部署。(1)集群所有节点停止服务。1.4 修改配置文件。
elasticsearch 8.1.3快速rpm安装指南
dzcro的博客
09-18 1163
CentOS7.9的环境下，elasticsearch8.1.3通过rpm方式快速安装演示
国产环境ElasticSearch使用rpm包安装记录.md
03-22
这只是安装文档，具体的资源在百度云中，文档上有链接，这个是为了适应国产中标麒麟操作系统，海光cpu，能够在三合一中安装的elasticsearch的rpm包。经过重新编译的。
elasticsearch-8.0.1-aarch64.rpm
03-05
elasticsearch-8.0.1-aarch64.rpm
linux下elasticsearch8.2.2 rpm安装包 linux下elasticsearch8.2.2 rpm安装
07-02
linux下elasticsearch8.2.2 rpm安装包linux下elasticsearch8.2.2 rpm安装包linux下elasticsearch8.2.2 rpm安装包linux下elasticsearch8.2.2 rpm安装包linux下elasticsearch8.2.2 rpm安装包linux下elasticsearch8.2.2...
elasticsearch-8.0.1-x86_64.rpm
03-05
elasticsearch-8.0.1-x86_64.rpm
最新版windows elasticsearch-8.0.1-windows-x86_64.zip
03-02
最新版windows elasticsearch-8.0.1-windows-x86_64.zip
es优化实践(es升级带来的大坑)-＞问题与痛点-＞优化过程-＞原理分析-＞最佳实践
正直 的博客
04-29 261
这里分享一个ES2.X升级到ES5.X带来的天坑问题,从问题与痛点,到优化过程,到原理分析,到最佳实践
【翻译】Elasticsearch-索引模块
最新发布
qq_49444793的博客
04-30 962
索引块限制对指定的索引的可用的操作类型（就是指对该索引能进行什么操作）。这些块有不同的风格，可以阻止写、读或元数据操作。块可以通过动态索引设置来设置/移除，也可以通过专用API添加，这也可以确保写入块一旦成功返回用户，所有索引分片都能正确地计算该块，例如，在添加写块后，所有对索引进行中的写入会完成。
ESLint 和 Prettier 各自的作用及区别
qq_39454432的博客
04-29 660
ESLint 和 Prettier 各自的作用及区别
linux安装elasticsearch.rpm包
03-28
以下是在Linux系统中安装elasticsearch.rpm包的步骤： 1. 下载elasticsearch的rpm包，可以在官方网站下载，命令如下： ``` wget ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

margu_168

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值