安装elasticsearch

已于 2022-10-13 19:48:10 修改
阅读量175 收藏
点赞数
文章标签： elasticsearch docker 大数据
于 2022-10-13 00:54:02 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_45592479/article/details/127292578
版权

安装elasticsearch

1.部署单点es

1.1.创建网络

因为我们还需要部署kibana容器，因此需要让es和kibana容器互联。这里先创建一个网络：

docker network create es-net

1.2.加载镜像

这里我们采用elasticsearch的7.12.1版本的镜像，这个镜像体积非常大，接近1G。不建议大家自己pull。

这里是我已经准备好的镜像的tar包：

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-EqbqD0N0-1665586983953)(assets/image-20210510165308064.png)]

大家将其上传到虚拟机中，然后运行命令加载即可：

# 导入数据
docker load -i es.tar

同理还有kibana的tar包也需要这样做。

1.3.运行

运行docker命令，部署单点es：

docker run -d \
	--name es \
    -e "ES_JAVA_OPTS=-Xms512m -Xmx512m" \
    -e "discovery.type=single-node" \
    -v es-data:/usr/share/elasticsearch/data \
    -v es-plugins:/usr/share/elasticsearch/plugins \
    --privileged \
    --network es-net \
    -p 9200:9200 \
    -p 9300:9300 \
elasticsearch:7.12.1

命令解释：

  • -e "cluster.name=es-docker-cluster"：设置集群名称
  • -e "http.host=0.0.0.0"：监听的地址，可以外网访问
  • -e "ES_JAVA_OPTS=-Xms512m -Xmx512m"：内存大小
  • -e "discovery.type=single-node"：非集群模式
  • -v es-data:/usr/share/elasticsearch/data：挂载逻辑卷，绑定es的数据目录
  • -v es-logs:/usr/share/elasticsearch/logs：挂载逻辑卷，绑定es的日志目录
  • -v es-plugins:/usr/share/elasticsearch/plugins：挂载逻辑卷，绑定es的插件目录
  • --privileged：授予逻辑卷访问权
  • --network es-net ：加入一个名为es-net的网络中
  • -p 9200:9200：端口映射配置

在浏览器中输入：http://192.168.200.128:9200 即可看到elasticsearch的响应结果：

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-G95TUy7S-1665586983954)(assets/image-20210506101053676.png)]

2.部署kibana

kibana可以给我们提供一个elasticsearch的可视化界面，便于我们学习。

2.1.部署

运行docker命令，部署kibana

docker run -d \
--name kibana \
-e ELASTICSEARCH_HOSTS=http://es:9200 \
--network=es-net \
-p 5601:5601  \
kibana:7.12.1
  • --network es-net ：加入一个名为es-net的网络中，与elasticsearch在同一个网络中
  • -e ELASTICSEARCH_HOSTS=http://es:9200"：设置elasticsearch的地址，因为kibana已经与elasticsearch在一个网络，因此可以用容器名直接访问elasticsearch
  • -p 5601:5601：端口映射配置

kibana启动一般比较慢，需要多等待一会，可以通过命令：

docker logs -f kibana

查看运行日志，当查看到下面的日志，说明成功：

我等了十多分钟 电脑太拉胯了!
小伙伴们可以去利用这个时间去复习一下java基础 就在我的java基础专栏
在这里插入图片描述

此时，在浏览器输入地址访问：http://192.168.200.128:9200，即可看到结果

2.2.DevTools

kibana中提供了一个DevTools界面：
在这里插入图片描述

这个界面中可以编写DSL来操作elasticsearch。并且对DSL语句有自动补全功能。

3.安装IK分词器

3.1.在线安装ik插件（较慢）

# 进入容器内部
docker exec -it elasticsearch /bin/bash

# 在线下载并安装
./bin/elasticsearch-plugin  install https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v7.12.1/elasticsearch-analysis-ik-7.12.1.zip

#退出
exit
#重启容器
docker restart elasticsearch

3.2.离线安装ik插件（推荐）

1）查看数据卷目录

安装插件需要知道elasticsearch的plugins目录位置，而我们用了数据卷挂载，因此需要查看elasticsearch的数据卷目录，通过下面命令查看:

docker volume inspect es-plugins

显示结果：

在这里插入图片描述
如果刚开始出现这种情况是因为没有挂载数据卷 要先挂载一下
在这里插入图片描述

说明plugins目录被挂载到了：/var/lib/docker/volumes/es-plugins/_data 这个目录中。

2）解压缩分词器安装包

下面我们需要把准备好的资料中的ik分词器解压缩，重命名为ik

在这里插入图片描述

3）上传到es容器的插件数据卷中

也就是/var/lib/docker/volumes/es-plugins/_data ：
在这里插入图片描述

4）重启容器

# 4、重启容器
docker restart es

# 查看es日志
docker logs -f es

5）测试：

IK分词器包含两种模式：

  • ik_smart：最少切分

  • ik_max_word：最细切分

GET /_analyze
{
  "analyzer": "standard",
  "text": "我是一个大帅哥"
}

结果：

{
    {
      "token" : "我",
      "start_offset" : 0,
      "end_offset" : 1,
      "type" : "<IDEOGRAPHIC>",
      "position" : 0
    },
    {
      "token" : "是",
      "start_offset" : 1,
      "end_offset" : 2,
      "type" : "<IDEOGRAPHIC>",
      "position" : 1
    },
    {
      "token" : "一",
      "start_offset" : 2,
      "end_offset" : 3,
      "type" : "<IDEOGRAPHIC>",
      "position" : 2
    },
    {
      "token" : "个",
      "start_offset" : 3,
      "end_offset" : 4,
      "type" : "<IDEOGRAPHIC>",
      "position" : 3
    },
    {
      "token" : "大",
      "start_offset" : 4,
      "end_offset" : 5,
      "type" : "<IDEOGRAPHIC>",
      "position" : 4
    },
    {
      "token" : "帅",
      "start_offset" : 5,
      "end_offset" : 6,
      "type" : "<IDEOGRAPHIC>",
      "position" : 5
    },
    {
      "token" : "哥",
      "start_offset" : 6,
      "end_offset" : 7,
      "type" : "<IDEOGRAPHIC>",
      "position" : 6
    }
  ]
}

3.3 扩展词词典

随着互联网的发展，“造词运动”也越发的频繁。出现了很多新的词语，在原有的词汇列表中并不存在。比如：“奥力给”，“传智播客” 等。

所以我们的词汇也需要不断的更新，IK分词器提供了扩展词汇的功能。

1）打开IK分词器config目录：

2）在IKAnalyzer.cfg.xml配置文件内容添加：

<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE properties SYSTEM "http://java.sun.com/dtd/properties.dtd">
<properties>
        <comment>IK Analyzer 扩展配置</comment>
        <!--用户可以在这里配置自己的扩展字典 *** 添加扩展词典-->
        <entry key="ext_dict">ext.dic</entry>
</properties>

3）新建一个 ext.dic，可以参考config目录下复制一个配置文件进行修改

我好帅
我是高级java工程师

4）重启elasticsearch

docker restart es

# 查看 日志
docker logs -f elasticsearch

你会发现日志中已经成功加载ext.dic配置文件

5）测试效果：

GET /_analyze
{
  "analyzer": "ik_max_word",
  "text": "我好帅哦! 我是高级java工程师"
}

结果是

{
  "tokens" : [
    {
      "token" : "我好帅",
      "start_offset" : 0,
      "end_offset" : 3,
      "type" : "CN_WORD",
      "position" : 0
    },
    {
      "token" : "我是高级java工程师",
      "start_offset" : 6,
      "end_offset" : 17,
      "type" : "CN_WORD",
      "position" : 1
    },
    {
      "token" : "高级",
      "start_offset" : 8,
      "end_offset" : 10,
      "type" : "CN_WORD",
      "position" : 2
    },
    {
      "token" : "java",
      "start_offset" : 10,
      "end_offset" : 14,
      "type" : "ENGLISH",
      "position" : 3
    },
    {
      "token" : "工程师",
      "start_offset" : 14,
      "end_offset" : 17,
      "type" : "CN_WORD",
      "position" : 4
    },
    {
      "token" : "工程",
      "start_offset" : 14,
      "end_offset" : 16,
      "type" : "CN_WORD",
      "position" : 5
    },
    {
      "token" : "师",
      "start_offset" : 16,
      "end_offset" : 17,
      "type" : "CN_CHAR",
      "position" : 6
    }
  ]
}

注意当前文件的编码必须是 UTF-8 格式，严禁使用Windows记事本编辑

3.4 停用词词典

在互联网项目中，在网络间传输的速度很快，所以很多语言是不允许在网络上传递的，如：关于宗教、政治等敏感词语，那么我们在搜索时也应该忽略当前词汇。

IK分词器也提供了强大的停用词功能，让我们在索引时就直接忽略当前的停用词汇表中的内容。

1）IKAnalyzer.cfg.xml配置文件内容添加：

<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE properties SYSTEM "http://java.sun.com/dtd/properties.dtd">
<properties>
        <comment>IK Analyzer 扩展配置</comment>
        <!--用户可以在这里配置自己的扩展字典-->
        <entry key="ext_dict">ext.dic</entry>
         <!--用户可以在这里配置自己的扩展停止词字典  *** 添加停用词词典-->
        <entry key="ext_stopwords">stopword.dic</entry>
</properties>

3）在 stopword.dic 添加停用词

是胡说八道

4）重启elasticsearch

# 重启服务
docker restart elasticsearch
docker restart kibana

# 查看 日志
docker logs -f elasticsearch

日志中已经成功加载stopword.dic配置文件

5）测试效果：

GET /_analyze
{
  "analyzer": "ik_max_word",
  "text": "我好帅哦! 我是高级java工程师是胡说八道"
}

注意当前文件的编码必须是 UTF-8 格式，严禁使用Windows记事本编辑

4.部署es集群

部署es集群可以直接使用docker-compose来完成，不过要求你的Linux虚拟机至少有4G的内存空间

首先编写一个docker-compose文件，内容如下：

version: '2.2'
services:
  es01:
    image: docker.elastic.co/elasticsearch/elasticsearch:7.12.1
    container_name: es01
    environment:
      - node.name=es01
      - cluster.name=es-docker-cluster
      - discovery.seed_hosts=es02,es03
      - cluster.initial_master_nodes=es01,es02,es03
      - bootstrap.memory_lock=true
      - "ES_JAVA_OPTS=-Xms512m -Xmx512m"
    ulimits:
      memlock:
        soft: -1
        hard: -1
    volumes:
      - data01:/usr/share/elasticsearch/data
    ports:
      - 9200:9200
    networks:
      - elastic
  es02:
    image: docker.elastic.co/elasticsearch/elasticsearch:7.12.1
    container_name: es02
    environment:
      - node.name=es02
      - cluster.name=es-docker-cluster
      - discovery.seed_hosts=es01,es03
      - cluster.initial_master_nodes=es01,es02,es03
      - bootstrap.memory_lock=true
      - "ES_JAVA_OPTS=-Xms512m -Xmx512m"
    ulimits:
      memlock:
        soft: -1
        hard: -1
    volumes:
      - data02:/usr/share/elasticsearch/data
    networks:
      - elastic
  es03:
    image: docker.elastic.co/elasticsearch/elasticsearch:7.12.1
    container_name: es03
    environment:
      - node.name=es03
      - cluster.name=es-docker-cluster
      - discovery.seed_hosts=es01,es02
      - cluster.initial_master_nodes=es01,es02,es03
      - bootstrap.memory_lock=true
      - "ES_JAVA_OPTS=-Xms512m -Xmx512m"
    ulimits:
      memlock:
        soft: -1
        hard: -1
    volumes:
      - data03:/usr/share/elasticsearch/data
    networks:
      - elastic

volumes:
  data01:
    driver: local
  data02:
    driver: local
  data03:
    driver: local

networks:
  elastic:
    driver: bridge

Run docker-compose to bring up the cluster:

docker-compose up
es01,es02,es03
      - bootstrap.memory_lock=true
      - "ES_JAVA_OPTS=-Xms512m -Xmx512m"
    ulimits:
      memlock:
        soft: -1
        hard: -1
    volumes:
      - data03:/usr/share/elasticsearch/data
    networks:
      - elastic

volumes:
  data01:
    driver: local
  data02:
    driver: local
  data03:
    driver: local

networks:
  elastic:
    driver: bridge

Run docker-compose to bring up the cluster:

docker-compose up
JJ_Boy0318
关注
银河麒麟系统安装es_entos7.4安装elasticsearch7.8.0单机版安装_kibana7.8.0安装_亲测可用_坑很多---ElasticSearch工作笔记026
添柴程序猿的专栏
02-15 573
1.安装以后发现,在Centos7中,可以用 curl http://localhost:9200 这样来访问,但是如果通过 curl http://172.19.128.56:9200 就不能访问
linux系统安装elasticsearch教程_linux 安装es
2401_84182318的博客
04-12 1230
课程，基本涵盖了95%以上大数据开发知识点，真正体系化！**
elasticsearch下安装IK分词器
https://hibernation0814.github.io/
05-19 306
(1)安装ik分词器 (2)IK分词器测试 (3)自定义分词器 (4)自定义停用词汇
初识ES-IK分词器的拓展和停用词典
Leon_Jinhai_Sun的博客
11-15 2588
扩展词词典 随着互联网的发展，“造词运动”也越发的频繁。出现了很多新的词语，在原有的词汇列表中并不存在。比如：“奥力给”等。 所以我们的词汇也需要不断的更新，IK分词器提供了扩展词汇的功能。 1）打开IK分词器config目录： 2）在IKAnalyzer.cfg.xml配置文件内容添加： <?xml version="1.0" encoding="UTF-8"?> <!DOCTYPE properties SYSTEM "http://java.sun.com/dtd/p
elasticsearch-安装IK分词器
m0_60769905的博客
12-25 1035
es在创建倒排索引时需要对文档分词，在搜索时，需要对用户输入内容分词。但默认的分词规则对中文处理并不友好，在kibana的DevTools中测试。说明plugins目录被挂载到了/var/lib/docker/volumes/es-plugins/_data这个目录。地址路径 /var/1ib/docker/volumes/es-plugins/_data。下面我们需要把课前资料中ik人词器解压缩，重命名为ik。处理中文分词，一般会使用IK分词器。
elasticsearch安装ik分词器
weixin_44879063的博客
04-11 2456
文章目录一、ik分词器二、安装分词器 一、ik分词器 ik分词器可以帮助elasticsearch分析单词、切割单词。ik分词器地址 二、安装分词器 之前已经使用docker挂载了elasticsearch的目录，具体如下（参考安装） ...
docker安装Elasticsearch7.6集群并设置密码
01-09
Elasticsearch从6.8开始， 允许免费用户使用X-Pack的安全功能， 以前安装es都是裸奔。接下来记录配置安全认证的方法。 为了简化物理安装过程，我们将使用docker安装我们的服务。 一些基础配置 es需要修改linux的一些...
linux系统安装elasticsearch教程_linux 安装es(2)，2024年最新致Linux运维开发者
最新发布
fdsgdsgdfw的博客
04-18 881
本书是获得了很多读者好评的Linux经典畅销书**《Linux从入门到精通》的第2版**。如果启动es，会报错，因为ES文件夹里自己携带了 JDK ，但是如果我们的 Linux 下安装了 JDK ，ES 就不会用自己自带的 JDK ，反而会使用我们 Linux 安装的 JDK ，这个时候如果两个jdk的版本不一致，就会造成jdk不能正常运行，报错,需要把配置修改下，注释部分是之前的，下面红框是修改后的 ,我的是我电脑的路口，修复制的时候记得修改路径。最全的Linux教程，Linux从入门到精通。
elasticsearch安装IK分词器
雨后星辰
05-20 631
编写配置文件 目录创建：mkdir -p elasticsearch/{plugins,/master/{conf,data}} kibana/conf/ 给es目录添加权限：chmod 777 elasticsearch/master/{conf,data} 编写es主节点配置文件：vi elasticsearch/master/conf/es-master.yml # 集群名称 cluster.name: es-cluster # 节点名称 node.name: es-node1 # 是否可以成为m
Elasticsearch 安装 ik分词器
Tongyao
05-17 332
以上字段“中国人民共和国万岁”，是主要测试分词故意写错的，纠正“中华人民共和国万岁”，大家可以分词测试。我的es版本是6.8.12的，所以下载的也是对应版本。下载下来的压缩包解压，后重命名文件夹为 ik，放入到。在kibana中测试的ik分词器。插件文件夹下，重启es即可。没安装ik分词器的。
ElasticSearch安装ik分词器
wencan579的博客
04-14 1418
将插件解压到es安装目录下的plugins目录，并重启es。直接请求9200端口可以查到基本信息。下载对应版本的插件zip文件。
Elasticsearch安装IK分词器
hq.zheng的博客
04-18 1401
解压命名改为ik，插件上传到/usr/local/elasticsearch-6.4.3/plugins，重启elasticsearch即可。1）、在/usr/local/elasticsearch-6.4.3/plugins/ik/config目录下。一、安装Elasticsearch。2）、修改配置文件新增自定义分词。二、下载对应版本ik分词器。三、测试分词器是否安装成功。四、自定义扩展分词器文件。
ElasticSearch 安装IK分词器
eyeofeagle的博客
12-17 2212
1，ES安装ik分词器 #1. ES安装IK分词器：ES版本：5.4.3 == IK分词器版本：5.4.3 # ES-IK分词器下载：https://github.com/medcl/elasticsearch-analysis-ik/releases?page=12 # https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v5.4.3/elasticsearch-analysis-ik-5.4.3.zip [root@
【工具】Elasticsearch安装IK分词器
孙大圣的博客
08-29 199
在 Elasticsearch的世界中，插件是很重要的一部分，很多功能都可以通过插件来实现，因此下面就以常用的IK分词器插件的安装为例，来操作一下 Elasticsearch插件的安装。
elasticsearch IK分词器的安装
学亮编程手记
08-24 336
2）解压，将解压后的elasticsearch文件夹拷贝到elasticsearch-5.6.8\plugins下，并重命名文件夹为analysis-ik （其他名字也可以，目的是不要重名）3）重新启动ElasticSearch，即可加载IK分词器。
安装elasticsearch、IK分词器
03-16 1859
前言： 安装jdk1.8.0，只需要下载包放到/usr/local/jdk1.8.0_161即可 写环境变量 #vim /etc/profile export JAVA_HOME=/usr/local/jdk1.8.0_161 export CLASSPATH=.:$JAVA_HOME/lib/dt.jar:$JAVA_HOME/lib/tools.jar export PATH=$PATH:$JAVA_HOME/bin 1、下载 #cd /usr/tmp #wget https://artifac.
docker安装ElasticSearch的ik分词器
张俊杰 的博客
02-14 2861
准备ik分词器 准备ik分词器,注意ik分词器的版本必须要和ElasticSearch的版本一致,比如说ElasticSearch是7.6.1版本,那么你的ik分词器也必须是7.6.1版本 自己自行下载,或者使用我百度网盘里面的 链接:https://pan.baidu.com/s/1_Iv2R8pmYaHkoaOk_m8OuQ 提取码: 5ezt 放到linux上 准备一个放在 elasticsearch-analysis-ik-7.6.1.zip "/tmp/elasticsearch-.
windows安装es怎么在后台运行_ES(一)——Windows安装ElasticSearch
05-20
要在后台运行Elasticsearch，可以按照以下步骤在Windows上安装Elasticsearch： 1. 下载Elasticsearch：从Elasticsearch官网下载最新版本的Elasticsearch。 2. 解压缩文件：将下载的Elasticsearch压缩包解压缩到你...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值