elasticsearch-7

最新推荐文章于 2024-07-23 15:22:54 发布
最新推荐文章于 2024-07-23 15:22:54 发布
阅读量597 收藏 17
点赞数 22
分类专栏： 程序员 文章标签： elasticsearch jenkins 大数据
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_74530944/article/details/138113446
版权

$ /usr/share/elasticsearch/bin/elasticsearch-setup-passwords interactive

Initiating the setup of passwords for reserved users elastic,apm_system,kibana,logstash_system,beats_system,remote_monitoring_user.

You will be prompted to enter passwords as the process progresses.

Please confirm that you would like to continue [y/N]y

Enter password for [elastic]:

Reenter password for [elastic]:

Enter password for [apm_system]:

Reenter password for [apm_system]:

Enter password for [kibana]:

Reenter password for [kibana]:

Enter password for [logstash_system]:

Reenter password for [logstash_system]:

Enter password for [beats_system]:

Reenter password for [beats_system]:

Enter password for [remote_monitoring_user]:

Reenter password for [remote_monitoring_user]:

Changed password for user [apm_system]

Changed password for user [kibana]

Changed password for user [logstash_system]

Changed password for user [beats_system]

Changed password for user [remote_monitoring_user]

Changed password for user [elastic]

  • interactive：给用户一一设置密码。

  • auto：自动生成密码。

如果这个地方报如下错误：

Failed to determine the health of the cluster running at http://192.168.3.42:9200

Unexpected response code [503] from calling GET http://192.168.3.42:9200/_cluster/health?pretty

Cause: master_not_discovered_exception

It is recommended that you resolve the issues with your cluster before running elasticsearch-setup-passwords.

It is very likely that the password changes will fail when run against an unhealthy cluster.

Do you want to continue with the password setup process [y/N]y

可能是有脏数据导致，此时可以停掉es，删除 data 数据目录，然后重新启动在进行操作。

配置完毕之后，可以通过如下方式访问es服务：

curl -XGET -u elastic ‘localhost:9200/_xpack/security/user?pretty’

curl 127.0.0.1:9200 -u elastic

3，配置kibana连接。

开启了安全认证之后，kibana连接es以及访问es都需要认证。

变更kibana的配置，一共有两种方法，一种明文的，一种密文的。

1，明文配置

server.port: 5601

server.host: “0.0.0.0”

server.name: “es-node1”

elasticsearch.hosts: [“http://192.168.3.42:9200”]

kibana.index: “.kibana”

i18n.locale: “zh-CN”

elasticsearch.username: “kibana”

elasticsearch.password: “kibana_passwd”

xpack.reporting.encryptionKey: “a_random_string”

xpack.security.encryptionKey: “something_at_least_32_characters”

  • elasticsearch.username：连接es的用户名。

  • elasticsearch.password：连接es的密码。

  • xpack.reporting.encryptionKey：如果不添加这条配置，将会报错 Generating a random key for xpack.reporting.encryptionKey. To prevent pending reports from failing on restart, please set xpack.reporting.encryptionKey in kibana.yml。

  • xpack.security.encryptionKey：如果不配置这条，将会报错 Generating a random key for xpack.security.encryptionKey. To prevent sessions from being invalidated on restart, please set xpack.security.encryptionKey in kibana.yml。

2，密文配置

当然肯定推荐使用这种密文的方式进行认证，认证之前，需要首先将用户名密码保存到内置的ketstore里。

/usr/share/kibana/bin/kibana-keystore --allow-root create

/usr/share/kibana/bin/kibana-keystore --allow-root add elasticsearch.username

/usr/share/kibana/bin/kibana-keystore --allow-root add elasticsearch.password

原封不动执行如上三条命令，用户名的时候输入kibana，密码写入对应密码，接着调整kibana的配置：

server.port: 5601

server.host: “0.0.0.0”

server.name: “es-node1”

elasticsearch.hosts: [“http://192.168.3.42:9200”]

kibana.index: “.kibana”

i18n.locale: “zh-CN”

xpack.reporting.encryptionKey: “a_random_string”

xpack.security.encryptionKey: “something_at_least_32_characters”

然后重启kibana即可访问，访问的时候使用elastic的用户密码登入，将是全局管理权限，如果需要创建kibana的只读用户，则可以通过管理–用户–新建用户，对用户进行角色授权即可。

3，logstash配置认证。

打开自定义的logstash的配置文件logstash.conf，在output中增加elasticsearch的用户名和密码

[root@ELK1 ~]# vim /home/elk/logstash-7.2.1/config/logstash.conf

input {

beats {

port => 5044

}

}

output {

stdout {

codec => rubydebug

}

elasticsearch {

hosts => [“192.168.3.42:9200”]

user => “elastic”

password => “123456”

}

}

4，集群配置。

在我配置过程中，发现集群认证需要首先配置秘钥才行，否则在给内置用户创建秘钥的时候将会报错。

1，证书。

如下操作在其中一个node节点执行即可，生成完证书传到集群其他节点即可。

/usr/share/elasticsearch/bin/elasticsearch-certutil ca

/usr/share/elasticsearch/bin/elasticsearch-certutil cert --ca elastic-stack-ca.p12

两条命令均一路回车即可，不需要给秘钥再添加密码。

证书创建完成之后，默认在es的数据目录，这里统一放到etc下：

$ ls elastic-*

elastic-certificates.p12 elastic-stack-ca.p12

mv elastic-* /etc/elasticsearch/

chown elasticsearch.elasticsearch elastic*

同样，将如上命令生成的两个证书文件拷贝到另外两台机器作为通信依据。

2，配置。

三台机器配置文件如下：

cluster.name: test-search

node.name: es-node-1

path.data: /data/elasticsearch/data

path.logs: /data/elasticsearch/log

network.host: 0.0.0.0

http.port: 9200

transport.tcp.port: 9300

discovery.seed_hosts: [“192.168.3.3:9300”,“192.168.3.4:9300”,“192.168.3.5:9300”]

cluster.initial_master_nodes: [“192.168.3.3:9300”,“192.168.3.4:9300”,“192.168.3.5:9300”]

xpack.security.enabled: true

xpack.security.transport.ssl.enabled: true

xpack.security.transport.ssl.verification_mode: certificate

xpack.security.transport.ssl.keystore.path: /etc/elasticsearch/elastic-certificates.p12

xpack.security.transport.ssl.truststore.path: /etc/elasticsearch/elastic-certificates.p12

除了node.name使用各自主机名之外，其他配置都一样。

如上配置无误，则可以启动es。

3，为内置账号添加密码

ES中内置了几个管理其他集成组件的账号即：apm_system, beats_system, elastic, kibana, logstash_system, remote_monitoring_user，使用之前，首先需要添加一下密码。

$ /usr/share/elasticsearch/bin/elasticsearch-setup-passwords interactive

Initiating the setup of passwords for reserved users elastic,apm_system,kibana,logstash_system,beats_system,remote_monitoring_user.

You will be prompted to enter passwords as the process progresses.

Please confirm that you would like to continue [y/N]y

Enter password for [elastic]:

Reenter password for [elastic]:

Enter password for [apm_system]:

Reenter password for [apm_system]:

Enter password for [kibana]:

Reenter password for [kibana]:

Enter password for [logstash_system]:

Reenter password for [logstash_system]:

Enter password for [beats_system]:

Reenter password for [beats_system]:

Enter password for [remote_monitoring_user]:

Reenter password for [remote_monitoring_user]:

Changed password for user [apm_system]

Changed password for user [kibana]

Changed password for user [logstash_system]
自我介绍一下，小编13年上海交大毕业，曾经在小公司待过，也去过华为、OPPO等大厂，18年进入阿里一直到现在。

深知大多数Java工程师，想要提升技能，往往是自己摸索成长或者是报班学习，但对于培训机构动则几千的学费，着实压力不小。自己不成体系的自学效果低效又漫长，而且极易碰到天花板技术停滞不前！

因此收集整理了一份《2024年Java开发全套学习资料》，初衷也很简单，就是希望能够帮助到想自学提升又不知道该从何学起的朋友，同时减轻大家的负担。img

既有适合小白学习的零基础资料，也有适合3年以上经验的小伙伴深入学习提升的进阶课程，基本涵盖了95%以上Java开发知识点，真正体系化！

由于文件比较大，这里只是将部分目录截图出来，每个节点里面都包含大厂面经、学习笔记、源码讲义、实战项目、讲解视频，并且会持续更新！

如果你觉得这些内容对你有帮助，可以扫码获取！！（备注：Java）

总结

阿里伤透我心，疯狂复习刷题，终于喜提offer 哈哈~好啦，不闲扯了

image

1、JAVA面试核心知识整理（PDF）：包含JVM，JAVA集合，JAVA多线程并发，JAVA基础，Spring原理，微服务，Netty与RPC，网络，日志，Zookeeper，Kafka，RabbitMQ，Hbase，MongoDB，Cassandra，设计模式，负载均衡，数据库，一致性哈希，JAVA算法，数据结构，加密算法，分布式缓存，Hadoop，Spark，Storm，YARN，机器学习，云计算共30个章节。

image

2、Redis学习笔记及学习思维脑图

image

3、数据面试必备20题+数据库性能优化的21个最佳实践

image
《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取！
DB**，Cassandra，设计模式，负载均衡，数据库，一致性哈希，JAVA算法，数据结构，加密算法，分布式缓存，Hadoop，Spark，Storm，YARN，机器学习，云计算共30个章节。

[外链图片转存中…(img-26K5OInM-1713838145154)]

2、Redis学习笔记及学习思维脑图

[外链图片转存中…(img-wrJ0iy55-1713838145155)]

3、数据面试必备20题+数据库性能优化的21个最佳实践

[外链图片转存中…(img-JjuIAcbF-1713838145155)]
《互联网大厂面试真题解析、进阶开发核心学习笔记、全套讲解视频、实战项目源码讲义》点击传送门即可获取！

m0_74530944
关注
  • 22
    点赞
  • 踩
  • 17
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
7.17.1系列Elasticsearch的elasticsearch-analysis-ik分词器
08-07
适用于7.17.1系列，例如Elasticsearch的7.17.12版本。 elasticsearch-analysis-ik 是一个常用的中文分词器，在 Elasticsearch 中广泛应用于中文文本的分析和搜索。下面是 elasticsearch-analysis-ik 分词器的几个...
elasticsearch-bulk-insert-plugin-8.x-es7.x.x.zip
11-18
kettle 支持elasticsearch7.x 批量上传的插件,减压后放到data-integration\plugins 目录下即可
es（Elasticsearch）客户端Elasticsearch-head安装使用（04Elasticsearch-head安装篇）
weixin_35815479的博客
08-07 5028
elasticsearch-head是一款专门针对于elasticsearch的客户端工具，用来展示数据。elasticsearch-head是基于JavaScript语言编写的，可以使用npm部署，npm是Nodejs下的包管理器安裝方式利用npm和nodejs进行安装启动，github中给出的安装方法也是这种，本文就是以这种方式进行解说。............
Elasticsearch-head访问出错
飞影铠甲的博客
07-24 1494
Elasticsearch-head访问Elasticsearch出错
linux安装elasticsearch-head （es可视化界面）
qq_36178165的博客
11-30 3368
linux安装elasticsearch-head （es可视化界面） ,集群健康值 未连接 等问题修改
Elasticsearch-04-Elasticsearch组件head和kibana详解
苍煜
06-28 6045
ElasticSearch是一个基于Lucene的搜索服务器。它提供了一个分布式多用户能力的全文搜索引擎，基于RESTful web接口。Elasticsearch是用Java开发的，并作为Apache许可条款下的开放源码发布，是当前流行的企业级搜索引擎。 -----百度百科而ElasticSearch-head就是一款能连接ElasticSearch搜索引擎，并提供可视化的操作页面对ElasticSearch搜索引擎进行各种设置和数据检索功能的管理插件，如在head插件页面编写R
Elasticsearch--01.ES8.1.0集群搭建
一叶知秋
10-11 2581
/opt/module/elasticsearch-8.1.0/elasticsearch-ssl-http.zip] (是否自定义名称、直接回车)Password for elastic-stack-ca.p12: (输入CA证书密码、上面生成CA证书未设置密码、直接回车)Generate a certificate per node: [y/n] n(是否每个节点都 生成证书)[y/n]y (是否使用已存在的CA证书)Is this correct [y/n] n(输入的主机名称是否正确)
chrome安装elasticsearch-head插件
zhangxiusheng30的博客
12-18 1382
2.解压elasticsearch-head-master.zip包找到目录elasticsearch-head-master\crx文件夹下es-head.crx文件，重命名为es-head.zip并解压。3.打开chrome扩展程序选择解压后的文件夹安装。
ES可视化工具--elasticsearch-head--下载、安装、使用
热门推荐
IT利刃出鞘的博客
08-31 1万+
本文介绍ES可视化工具--ElasticSearch-Head的下载与安装的方法。
elasticsearch-head的使用
一个喜欢诗和远方的程序媛
02-11 2094
elasticsearch-head将是一款专门针对于elasticsearch的客户端工具。 1、健康值 集群健康值的几种状态如下： 绿色，最健康的状态，代表所有的分片包括备份都可用 黄色，基本的分片可用，但是备份不可用（也可能是没有备份） 红色，部分的分片可用，表明分片有一部分损坏。此时执行查询部分数据仍然可以查到，遇到这种情况，还是赶快解决比较好 灰色，未连接到elasticsearch服务 2、基本信息查看和操作 在task_info下，选择信息–>索引信息，可以查看该索引的所有信息，包
Linux安装 ES elasticsearch-7.15.1
weixin_44604118的博客
10-19 3002
创建目录 cd /usr/local/ mkdir es 下载压缩包 wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.15.1-linux-x86_64.tar.gz 如果下载不了请自行去 ES官网 找 解压文件 tar -xvf elasticsearch-7.15.1-linux-x86_64.tar.gz 修改配置 如果你的 jdk 是11或以上可忽略此步 vim /usr/local/es/el
Elasticsearch-head插件的安装
weixin_42326851的博客
03-30 7475
Centos7 环境 Elasticsearch-Head插件的安装
elasticsearch-analysis-ik-7.12.1
05-08
**Elasticsearch 分析插件 IK Analysis** **一、IK Analysis 概述** IK Analysis（全称：Intelligent Chinese Analysis）是针对 Elasticsearch 的一个强大且成熟的中文分词插件，专为处理中文文本分析而设计。它...
elasticsearch-7.12.1插件
04-13
其中包括三个：elasticsearch-analysis-pinyin-7.12.1，elasticsearch-analysis-ik-7.12.1，elasticsearch-analysis-dynamic-synonym-7.12.1
elasticsearch-analysis-dynamic-synonym-7.6.2
08-17
Elasticsearch（ES）作为一款强大的全文搜索引擎，同样支持对同义词的处理。`elasticsearch-analysis-dynamic-synonym-7.6.2`是一个专为ES7.6.2版本设计的动态同义词插件，旨在实现同义词的动态加载和管理，使得同义...
Git仓库拆分和Merge
你若盛开，清风自来
07-20 566
我们原先有一个项目叫open-api，后来想要做租户独立发展，每个租户独立成一个项目，比如租户akc独立部署一个akc-open-api，租户yhd独立部署一个yhd-open-api，其中大部分代码是相同的，少量租户定制代码。上面我们从open-api项目复制了一个新的akc-open-api项目，公共的代码修我们不想重复劳动，通过修改open-api，再通过跨项目合并到不同的租户下。这一节的目的是从open-api复制一个新项目称为akc-open-api，操作步骤如下。关联open-api的仓库。
Elasticsearch：Golang ECS 日志记录 - zap
最新发布
Elastic 中国社区官方博客
07-23 523
ECS 记录器是你最喜欢的日志库的格式化程序/编码器插件。它们可让你轻松地将日志格式化为与 ECS 兼容的 JSON。编码器以 JSON 格式记录日志，并在可能的情况下依赖默认的。它还处理 ECS 错误格式的错误字段记录。
git面面观，面试题，常见问题
jylee的博客
07-23 638
Git是一款分布式源代码管理工具(版本控制工具)。Git得其数据更像是一系列微型文件系统的快照。使用Git，每次提交或保存项目状态时，Git基本上都会记录当时所有文件的外观，并存储对该快照的引用。为了提高效率，如果文件没有改变，Git不会再次存储文件，只是指向它已存储的上一个相同文件的链接。Git认为它的数据更像是一个快照流，会将数据作为项目的快照存储一段时间。可以有效、高速地处理从很小到非常大的项目版本管理。
Manticore Search(es轻量级替代)
m0_37840000的博客
07-23 581
这一切使 Manticore Search 成为一个现代，快速，轻量级和功能齐全的数据库，具有出色的全文搜索功能。它还提供了丰富的查询语法和功能，以满足不同的搜索需求。社交媒体应用： 对于需要实时搜索和过滤大量用户生成的内容的社交媒体应用程序，Manticore也是一个合适的选择。日志分析： 由于其实时索引更新和高性能特性，Manticore适用于处理大规模的日志数据，支持快速的搜索和分析。在线文档搜索： 对于需要在大量文档中进行快速搜索的应用，Manticore可以提供高效的解决方案。
Cannot find a valid baseurl for repo: elasticsearch-7.x
12-19
根据提供的引用内容，你遇到了一个关于elasticsearch-7.x仓库的问题，无法找到有效的baseurl。这通常是由于网络连接问题或仓库配置错误引起的。为了解决这个问题，你可以尝试以下几个步骤： 1. 检查网络连接：确保...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值