ElasticSearch安装一套完结

已于 2023-02-21 20:11:53 修改
阅读量289 收藏
点赞数
分类专栏： Java 文章标签： elasticsearch
于 2022-02-07 08:58:49 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/xiaoyixiao_/article/details/122804112
版权

目录

ElasticSearch安装Linux单机版

软件下载

Elasticsearch 7.8.0 | Elastic

image-20210711083511041

解压软件

# 解压缩
tar -zxvf elasticsearch-7.8.0-linux-x86_64.tar.gz -C /opt/module
# 改名
mv elasticsearch-7.8.0 es

创建用户

因为安全问题，Elasticsearch不允许root用户直接运行，所以要创建新用户，在root用户中创建新用户

useradd es # 新增 es 用户
passwd es # 为 es 用户设置密码
userdel -r es # 如果错了，可以删除再加
chown -R es:es /opt/module/es #文件夹所有者

修改配置文件

修改/opt/module/es/config/elasticsearch.yml文件

# 加入如下配置
cluster.name: elasticsearch
node.name: node-1
network.host: 0.0.0.0
http.port: 9200
cluster.initial_master_nodes: ["node-1"]

修改/etc/security/limits.d/20-nproc.conf

# 在文件末尾中增加下面内容
# 每个进程可以打开的文件数的限制
es soft nofile 65536
es hard nofile 65536
# 操作系统级别对每个用户创建的进程数的限制
* hard nproc 4096
# 注：* 带表 Linux 所有用户名称

修改/etc/sysctl.conf

# 在文件中增加下面内容
# 一个进程可以拥有的 VMA(虚拟内存区域)的数量,默认值为 65536
vm.max_map_count=655360

重新加载

sysctl -p

启动软件

使用ES用户启动

cd /opt/module/es/
#启动
bin/elasticsearch
#后台启动
bin/elasticsearch -d

启动时，会动态生成文件，如果文件所属用户不匹配，会发生错误，需要重新进行修改用户和用户组。浏览器中输入地址：http://linux1:9200/

image-20210711084201836

ElasticSearch安装Linux集群版

软件下载

Elasticsearch 7.8.0 | Elastic

image-20210711083511041

解压软件

在三台机器上同时解压

# 解压缩
tar -zxvf elasticsearch-7.8.0-linux-x86_64.tar.gz -C /opt/module
# 改名
mv elasticsearch-7.8.0 es-cluster

创建用户

因为安全问题，Elasticsearch不允许root用户直接运行，所以要在每个节点中创建新用户，在root用户中创建新用户

useradd es # 新增 es 用户
passwd es # 为 es 用户设置密码
userdel -r es # 如果错了，可以删除再加
chown -R es:es /opt/module/es #文件夹所有者

修改配置文件

修改/opt/module/es/config/elasticsearch.yml 文件，分发文件

# 加入如下配置
#集群名称
cluster.name: cluster-es
#节点名称，每个节点的名称不能重复
node.name: node-1
#ip 地址，每个节点的地址不能重复
network.host: linux1
#是不是有资格主节点
node.master: true
node.data: true
http.port: 9200
# head 插件需要这打开这两个配置
http.cors.allow-origin: "*"
http.cors.enabled: true
http.max_content_length: 200mb
#es7.x 之后新增的配置，初始化一个新的集群时需要此配置来选举 master
cluster.initial_master_nodes: ["node-1"]
# es7.x 之后新增的配置，节点发现
discovery.seed_hosts: ["linux1:9300","linux2:9300","linux3:9300"]
gateway.recover_after_nodes: 2
network.tcp.keep_alive: true
network.tcp.no_delay: true
transport.tcp.compress: true
# 集群内同时启动的数据任务个数，默认是 2 个
cluster.routing.allocation.cluster_concurrent_rebalance: 16
# 添加或删除节点及负载均衡时并发恢复的线程个数，默认 4 个
cluster.routing.allocation.node_concurrent_recoveries: 16
# 初始化数据恢复时，并发恢复线程的个数，默认 4 个
cluster.routing.allocation.node_initial_primaries_recoveries: 16

修改/etc/security/limits.conf ，分发文件

# 在文件末尾中增加下面内容
es soft nofile 65536
es hard nofile 65536

修改/etc/security/limits.d/20-nproc.conf，分发文件

# 在文件末尾中增加下面内容
es soft nofile 65536
es hard nofile 65536
* hard nproc 4096
# 注：* 带表 Linux 所有用户名称

修改/etc/sysctl.conf

# 在文件中增加下面内容
vm.max_map_count=655360

重新加载

sysctl -p

启动软件

分别在不同节点上启动ES软件

cd /opt/module/es-cluster
#启动
bin/elasticsearch
#后台启动
bin/elasticsearch -d

测试集群

image-20210711084753073

ElasticSearch安装Docker版

下载elasticSearch(存储和检索)和kibana(可视化检索)

版本要统一

docker pull elasticsearch:7.4.2
docker pull kibana:7.4.2

elasticsearch启动前准备

为了将docker里的目录挂载到linux的/mydata目录中，修改/mydata就可以改掉docker里的，添加数据卷

mkdir -p /mydata/elasticsearch/config
mkdir -p /mydata/elasticsearch/data

es可以被远程任何机器访问

echo "http.host: 0.0.0.0" >/mydata/elasticsearch/config/elasticsearch.yml

递归更改权限，es需要访问

chmod -R 777 /mydata/elasticsearch/

启动elasticsearch

启动ES，因为容器内的文件映射到了外面，所以删除容器和新建容器数据还在，数据挂在到外面，但是访问权限不足，把/mydata/elasticsearch下文件夹的权限设置好

# 9200是用户交互端口 9300是集群心跳端口
# -e指定是单阶段运行
# -e指定占用的内存大小，生产时可以设置32G
docker run --name elasticsearch -p 9200:9200 -p 9300:9300 \
-e  "discovery.type=single-node" \
-e ES_JAVA_OPTS="-Xms64m -Xmx512m" \
-v /mydata/elasticsearch/config/elasticsearch.yml:/usr/share/elasticsearch/config/elasticsearch.yml \
-v /mydata/elasticsearch/data:/usr/share/elasticsearch/data \
-v  /mydata/elasticsearch/plugins:/usr/share/elasticsearch/plugins \
-d elasticsearch:7.4.2

查看运行日志

docker logs elasticsearch

设置开机启动elasticsearch

docker update elasticsearch --restart=always

启动Kibana(可视化检索)

docker run --name kibana -e ELASTICSEARCH_HOSTS=http://192.168.56.10:9200 -p 5601:5601 -d kibana:7.4.2

设置开机启动kibana

docker update kibana --restart=always

ElasticSearch安装IK分词器

分词器概述

一个分词器接收一个字符流，该分词器负责记录各个词条的顺序或位置，用于短语和词近邻查询，以及词条所代表的原始单词的起始和结束的字符串偏移量用于高亮显示搜索的内容。elasticsearch提供了很多内置的分词器（标准分词器），可以用来构建自定义分词器。但是对于中文不友好，往往需要安装额外的分词器

**注意：**不能用默认elasticsearch-plugin install xxx.zip 进行自动安装。IK分词器的版本跟ES的版本一一对应IK分词器地址

分词器安装

在上文elasticsearch安装Docker版，已经将elasticsearch容器的/usr/share/elasticsearch/plugins目录，映射到宿主机的/mydata/elasticsearch/plugins目录下，所以比较方便的做法就是下载/elasticsearch-analysis-ik-7.4.2.zip文件，然后解压到该文件夹下即可。安装完毕后，需要重启elasticsearch容器，最后进行测试

GET _analyze
{
   "analyzer": "ik_smart", 
   "text":"我是中国人"
}

GET _analyze
{
   "analyzer": "ik_max_word", 
   "text":"我是中国人"
}

自定义词库

目标：比如我们要把笑一笑算作一个词

修改配置文件

修改/usr/share/elasticsearch/plugins/ik/config中的IKAnalyzer.cfg.xml

<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE properties SYSTEM "http://java.sun.com/dtd/properties.dtd">
<properties>
	<comment>IK Analyzer 扩展配置</comment>
	<!--用户可以在这里配置自己的扩展字典 -->
	<entry key="ext_dict"></entry>
	 <!--用户可以在这里配置自己的扩展停止词字典-->
	<entry key="ext_stopwords"></entry>
	<!--用户可以在这里配置远程扩展字典 -->
	<entry key="remote_ext_dict">http://192.168.56.10/es/fenci.txt</entry> 
	<!--用户可以在这里配置远程扩展停止词字典-->
	<!-- <entry key="remote_ext_stopwords">words_location</entry> -->
</properties>

修改完成后，需要重启elasticsearch容器，否则修改不生效。

docker restart elasticsearch

更新完成后，es只会对于新增的数据用更新分词。历史数据是不会重新分词的。如果想要历史数据重新分词，需要执行

POST my_index/_update_by_query?conflicts=proceed

搭建远程扩展词典

目标:搭配nginx做远程扩展词典

# 远程扩展词典路径http://192.168.56.10/es/fenci.txt
mkdir /mydata/nginx/html/es
cd /mydata/nginx/html/es
vim fenci.txt
输入 笑一笑

测试效果

GET _analyze
{
   "analyzer": "ik_max_word", 
   "text":"我是笑一笑"
}
笑一笑、
关注
专栏目录
【ELK01】ELK简介以及ElasticSearch安装、ES客户端工具-Head安装、报错问题整理
Alex的博客
11-16 968
ELK 是elastic公司提供的一套完整的日志收集以及展示的解决方案，是三个产品的首字母缩写，分别是ElasticSearch、Logstash 和 Kibana。head插件是一个可以帮助用户代理访问es的,可以图形界面展示数据的插件.我们配置了es的跨域开启,所以为了方便观察,我们可以安装head插件。
Elasticsearch安装
shaoqiufeng的博客
06-01 138
1. 下载Elasticsearch安装包wget https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-5.5.3.tar.gz2. Elasticsearch安装解压 tar -zxvf elasticsearch-5.5.3.tar.gz 删除掉安装包 rm –rf elasticsearch-5.5.3.tar.gz3. 修改Elasticsearch 配置 编辑Elasticsearch con
ElasticSearch安装
02-25 103
官网及Github地址： http://www.elastic.co/guide/en/elasticsearch/reference/current/setup-configuration.html https://github.com/elastic/elasticsearch 【在多台机器上执行下面的命令】 es启动时需要使用非root用户，所有创建...
一文解决Elasticsearch下载安装以及使用配置
最新发布
weixin_44777347的博客
08-09 1310
文章介绍elasticsearch从下载安装到配置以及分词器类型区别，以及分词器配置，集成到spring boot项目的具体操作流程
ElasticSearch使用一套全
08-27
ElasticSearch管理控制台Kibana压缩包，Kibana是ES提供的一个基于Node.js的管理控制台, 可以很容易实现高级的数据分析和可视化，以图标的形式展现出来。 ElasticSearch的可视化管理插件head，监视ES的状态 查看...
ElasticSearch安装手册1.01
08-08
在本安装手册中，我们将重点介绍如何在Linux环境下安装Elasticsearch、IK分词器、拼音分析器以及相关的插件，以构建一个基础的搜索和分析环境。 1. JDK 安装 Elasticsearch 6.1 版本需要Java Development Kit (JDK)...
elasticsearch7.17.9版本分词器插件安装包
11-13
"ES"是Elasticsearch的简称，而"ELK"栈是指Elasticsearch、Logstash和Kibana的组合，常用于日志管理和分析。这个分词器插件可以与Logstash集成，帮助处理和分析来自各种日志源的数据。 压缩包中的其他文件如`...
windows最新版 elasticsearch-7.17.0-windows-x86_64.zip
04-28
总之，Elasticsearch 7.17.0 for Windows提供了一套强大的搜索和分析平台，适用于各种Windows环境中的大数据应用场景。无论是开发者、数据分析师还是系统管理员，都能从中受益。正确配置和使用Elasticsearch，能够极...
Elasticstack安装文档（注意是全套es5.5.2版的安装，全套哦！！！）
09-13
此安装文档中，介绍的全套es5.52版本的安装，（包括：filebeat，logstash，elasticsearch，kibana，以及x-pack插件的安装），并且包含es的学习链接，绝对真实有效。
ElasticSearch 安装
陈家老二的博客
03-04 654
1.进入elastic官网 https://www.elastic.co/cn/downloads/elasticsearch 2.下载当前版本 3.安装elasticSearch历史版本 4.下载elasticsearch安装包 yum -y install wget----------------------------(未安装wget请先安装) wget https://artifacts.elastic.co/downloads/elasticsearch/elast...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值