Elasticsearch7.3-安装

最新推荐文章于 2022-11-14 16:42:26 发布
最新推荐文章于 2022-11-14 16:42:26 发布
阅读量779 收藏 2
点赞数
分类专栏： 其它
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/ko0491/article/details/109982373
版权

JDK

export JAVA_HOME=/usr/local/jdk1.8.0_261
export JRE_HOME=$JAVA_HOME/jre
export CLASSPATH=.:${JAVA_HOME}/lib:${JRE_HOME}/lib
export PATH=${JAVA_HOME}/bin:$PATH

elasticsearch下载

https://www.elastic.co/cn/downloads/past-releases#elasticsearch
下载
在这里插入图片描述

安装与配置

tar -zxvf elasticsearch-7.3.0-linux-x86_64.tar.gz
mv elasticsearch-7.3.0 /usr/elasticsearch/
  • 配置Elasticsearch

单机安装请取消注释：node.name: node-1，否则无法正常启动。
修改网络和端口，取消注释master节点，单机只保留一个node

cd /usr/elasticsearch/config
vim elasticsearch.yml
node.name: node-1
network.host: 192.168.181.140
# #
Set a custom port for HTTP:
# h
ttp.port: 9200
cluster.initial_master_nodes: ["node-1"]

在这里插入图片描述

在这里插入图片描述

按需修改vim jvm.options内存设置

根据实际情况修改占用内存，默认都是1G，单机1G内存，启动会占用700m+然后在安装kibana
后，基本上无法运行了，运行了一会就挂了报内存不足。 内存设置超出物理内存，也会无法启
动，启动报错

-Xms1g
-Xmx1g
在这里插入图片描述

  • 添加es用户，es默认root用户无法启动，需要改为其他用户
    useradd estest
    修改密码
    passwd estest
    在这里插入图片描述
  • 改变es目录拥有者账号
chown -R estest /usr/elasticsearch/

在这里插入图片描述

  • 修改/etc/sysctl.conf
vim /etc/sysctl.conf

执行sysctl -p 让其生效
在这里插入图片描述

末尾添加：vm.max_map_count=655360

  • 修改/etc/security/limits.conf
vim /etc/security/limits.conf

末添加

*                soft     nofile         65536
*                hard     nofile         65536
*                soft     nproc          4096
*                hard     nproc          4096

在这里插入图片描述

  • 启动es
    切换刚刚新建的用户
su estest
/usr/elasticsearch/bin/elasticsearch

在这里插入图片描述

http://192.168.181.140:9200/
在这里插入图片描述

kibana

https://www.elastic.co/cn/downloads/past-releases#kibana
在这里插入图片描述

安装配置kibana

Kibana是一个基于Node.js的Elasticsearch索引库数据统计工具，可以利用Elasticsearch的聚合功能，生成各种图表，如柱形图，线状图，饼图等。
而且还提供了操作Elasticsearch索引数据的控制台，并且提供了一定的API提示
在这里插入图片描述

  • 安装kibana
    root账户下操作
tar -zxvf kibana-7.3.0-linux-x86_64.tar.gz
mv  kibana-7.3.0-linux-x86_64 /usr/kibana/

改变es目录拥有者账号

chown -R estest /usr/kibana/
chmod -R 777 /usr/kibana/

在这里插入图片描述

  • 修改配置
vim /usr/kibana/config/kibana.yml

修改端口，访问ip,elasticsearch服务器ip

server.port: 5601
# 监听所有的ip
server.host: "0.0.0.0" 
# The URLs of the Elasticsearch instances to use for all your queries.
elasticsearch.hosts: ["http://192.168.181.140:9200"]

在这里插入图片描述

  • 启动
切换用户
su estest
./bin/kibana(路径：/usr/kibana)

在这里插入图片描述

  • 访问
    http://192.168.181.140:5601/
    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述
    ctrl+enter 提交请求
    ctrl+i 自动缩进

Elasticsearch集成IK分词器

集成IK分词器
IKAnalyzer是一个开源的，基于java语言开发的轻量级的中文分词工具包。从2006年12月推出1.0版开始，IKAnalyzer已经推出 了3个大版本。最初，它是以开源项目Lucene为应用主体的，结合词典分词和文法分析算法的中文分词组件。新版本的IKAnalyzer3.0则发展为 面向Java的公用分词组件，独立于Lucene项目，同时提供了对Lucene的默认优化实现。

IK分词器3.0的特性如下：
1）采用了特有的“正向迭代最细粒度切分算法“，具有60万字/秒的高速处理能力。
2）采用了多子处理器分析模式，支持：英文字母（IP地址、Email、URL）、数字（日期，常用中文数
量词，罗马数字，科学计数法），中文词汇（姓名、地名处理）等分词处理。
3）支持个人词条的优化的词典存储，更小的内存占用。
4）支持用户词典扩展定义。
5）针对Lucene全文检索优化的查询分析器IKQueryParser；采用歧义分析算法优化查询关键字的搜索
排列组合，能极大的提高Lucene检索的命中率

https://github.com/medcl/elasticsearch-analysis-ik/releases/tag/v7.3.0

在elasticsearch的bin目录下执行以下命令,es插件管理器会自动帮我们安装，然后等待安装完成

/usr/elasticsearch/bin/elasticsearch-plugin install https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v7.3.0/elasticsearch-analysis-ik-7.3.0.zip

下载完成后会提示 Continue with installation?输入 y 即可完成安装
重启Elasticsearch 和Kibana

  • 安装方式2
    在elasticsearch安装目录的plugins目录下新建 analysis-ik 目录
#新建analysis-ik文件夹
mkdir analysis-ik
#切换至 analysis-ik文件夹下
cd analysis-ik
#上传资料中的 elasticsearch-analysis-ik-7.3.0.zip
#解压
unzip elasticsearch-analysis-ik-7.3.3.zip
#解压完成后删除zip
rm -rf elasticsearch-analysis-ik-7.3.0.zip

重启Elasticsearch 和Kibana
IK分词器有两种分词模式：ik_max_word和ik_smart模式
k_max_word (常用)
会将文本做最细粒度的拆分
ik_smart
会做最粗粒度的拆分

  • 测试
POST _analyze
{
"analyzer": "ik_max_word",
"text": "南京市长江大桥"
}

POST _analyze
{
"analyzer": "ik_smart",
"text": "南京市长江大桥"
}
  • 结果1
{
  "tokens" : [
    {
      "token" : "南京市",
      "start_offset" : 0,
      "end_offset" : 3,
      "type" : "CN_WORD",
      "position" : 0
    },
    {
      "token" : "南京",
      "start_offset" : 0,
      "end_offset" : 2,
      "type" : "CN_WORD",
      "position" : 1
    },
    {
      "token" : "市长",
      "start_offset" : 2,
      "end_offset" : 4,
      "type" : "CN_WORD",
      "position" : 2
    },
    {
      "token" : "长江大桥",
      "start_offset" : 3,
      "end_offset" : 7,
      "type" : "CN_WORD",
      "position" : 3
    },
    {
      "token" : "长江",
      "start_offset" : 3,
      "end_offset" : 5,
      "type" : "CN_WORD",
      "position" : 4
    },
    {
      "token" : "大桥",
      "start_offset" : 5,
      "end_offset" : 7,
      "type" : "CN_WORD",
      "position" : 6
    }
  ]
}
  • 结果2
{
  "tokens" : [
    {
      "token" : "南京市",
      "start_offset" : 0,
      "end_offset" : 3,
      "type" : "CN_WORD",
      "position" : 0
    },
    {
      "token" : "长江大桥",
      "start_offset" : 3,
      "end_offset" : 7,
      "type" : "CN_WORD",
      "position" : 1
    }
  ]
}

如果现在假如江大桥是一个人名，是南京市市长，那么上面的分词显然是不合理的，该怎么办

自定义扩展词库

1）进入到 config/analysis-ik/(插件命令安装方式) 或 plugins/analysis-ik/config(安装包安装方式) 目录
下, 新增自定义词典

vim my_ext_dict.dic

输入江大桥

vim IKAnalyzer.cfg.xml
<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE properties SYSTEM "http://java.sun.com/dtd/properties.dtd">
<properties>
	<comment>IK Analyzer 扩展配置</comment>
	<!--用户可以在这里配置自己的扩展字典 -->
	<entry key="ext_dict">my_ext_dict.dic</entry>
	 <!--用户可以在这里配置自己的扩展停止词字典-->
	<entry key="ext_stopwords"></entry>
	<!--用户可以在这里配置远程扩展字典 -->
	<!-- <entry key="remote_ext_dict">words_location</entry> -->
	<!--用户可以在这里配置远程扩展停止词字典-->
	<!-- <entry key="remote_ext_stopwords">words_location</entry> -->
</properties>

重启Elasticsearch


POST _analyze
{
"analyzer": "ik_max_word",
"text": "南京市长江大桥"
}
  • 结果
{
  "tokens" : [
    {
      "token" : "南京市",
      "start_offset" : 0,
      "end_offset" : 3,
      "type" : "CN_WORD",
      "position" : 0
    },
    {
      "token" : "南京",
      "start_offset" : 0,
      "end_offset" : 2,
      "type" : "CN_WORD",
      "position" : 1
    },
    {
      "token" : "市长",
      "start_offset" : 2,
      "end_offset" : 4,
      "type" : "CN_WORD",
      "position" : 2
    },
    {
      "token" : "长江大桥",
      "start_offset" : 3,
      "end_offset" : 7,
      "type" : "CN_WORD",
      "position" : 3
    },
    {
      "token" : "长江",
      "start_offset" : 3,
      "end_offset" : 5,
      "type" : "CN_WORD",
      "position" : 4
    },
    {
      "token" : "江大桥",
      "start_offset" : 4,
      "end_offset" : 7,
      "type" : "CN_WORD",
      "position" : 5
    },
    {
      "token" : "大桥",
      "start_offset" : 5,
      "end_offset" : 7,
      "type" : "CN_WORD",
      "position" : 6
    }
  ]
}
停用词典使用

停用词：有些词在文本中出现的频率非常高。但对本文的语义产生不了多大的影响。例如英文的a、an、the、of等。或中文的”的、了、呢等”。这样的词称为停用词。停用词经常被过滤掉，不会被进行索引。在检索的过程中，如果用户的查询词中含有停用词，系统会自动过滤掉。停用词可以加快索引的速度，减少索引库文件的大小
自定义停用词库
1）进入到 config/analysis-ik/(插件命令安装方式) 或 plugins/analysis-ik/config(安装包安装方式) 目录
下, 新增自定义词典

vim my_stop_dict.dic

输入市长
在这里插入图片描述

  • 重启es
POST _analyze
{
"analyzer": "ik_max_word",
"text": "南京市长江大桥"
}

{
  "tokens" : [
    {
      "token" : "南京市",
      "start_offset" : 0,
      "end_offset" : 3,
      "type" : "CN_WORD",
      "position" : 0
    },
    {
      "token" : "南京",
      "start_offset" : 0,
      "end_offset" : 2,
      "type" : "CN_WORD",
      "position" : 1
    },
    {
      "token" : "长江大桥",
      "start_offset" : 3,
      "end_offset" : 7,
      "type" : "CN_WORD",
      "position" : 2
    },
    {
      "token" : "长江",
      "start_offset" : 3,
      "end_offset" : 5,
      "type" : "CN_WORD",
      "position" : 3
    },
    {
      "token" : "江大桥",
      "start_offset" : 4,
      "end_offset" : 7,
      "type" : "CN_WORD",
      "position" : 4
    },
    {
      "token" : "大桥",
      "start_offset" : 5,
      "end_offset" : 7,
      "type" : "CN_WORD",
      "position" : 5
    }
  ]
}

市长没有了

同义词

同义词典使用
语言博大精深，有很多相同意思的词，我们称之为同义词，比如“番茄”和“西红柿”，“馒头”和“馍”等。在
搜索的时候，我们输入的可能是“番茄”，但是应该把含有“西红柿”的数据一起查询出来，这种情况叫做
同义词查询。
注意：扩展词和停用词是在索引的时候使用，而同义词是检索时候使用
配置IK同义词
Elasticsearch 自带一个名为 synonym 的同义词 filter。为了能让 IK 和 synonym 同时工作，我们需要
定义新的 analyzer，用 IK 做 tokenizer，synonym 做 filter。听上去很复杂，实际上要做的只是加一段
配置。
1）创建/config/analysis-ik/synonym.txt 文件，输入一些同义词并存为 utf-8 格式。例如
lagou,拉勾
china,中国

  • 语法
PUT /索引名称
{
"settings": {
"analysis": {
"filter": {
"word_sync": {
"type": "synonym",
"synonyms_path": "analysis-ik/synonym.txt"
}
},
"analyzer": {
"ik_sync_max_word": {
"filter": [
"word_sync"
],
"type": "custom",
"tokenizer": "ik_max_word"
},"ik_sync_smart": {
"filter": [
"word_sync"
],
"type": "custom",
"tokenizer": "ik_smart"
}
}
}
},
"mappings": {
"properties": {
"字段名": {
"type": "字段类型",
"analyzer": "ik_sync_smart",
"search_analyzer": "ik_sync_smart"
}
}
}
}

以上配置定义了ik_sync_max_word和ik_sync_smart这两个新的 analyzer，对应 IK 的 ik_max_word 和
ik_smart 两种分词策略。ik_sync_max_word和 ik_sync_smart都会使用 synonym filter 实现同义词转
换

  • 测试
PUT /lagou-es-synonym
{
  "settings": {
    "analysis": {
      "filter": {
        "word_sync": {
          "type": "synonym",
          "synonyms_path": "analysis-ik/synonym.txt"
        }
      },
      "analyzer": {
        "ik_sync_max_word": {
          "filter": [
            "word_sync"
          ],
          "type": "custom",
          "tokenizer": "ik_max_word"
        },
        "ik_sync_smart": {
          "filter": [
            "word_sync"
          ],
          "type": "custom",
          "tokenizer": "ik_smart"
        }
      }
    }
  },
  "mappings": {
    "properties": {
      "name": {
        "type": "text",
        "analyzer": "ik_sync_max_word",
        "search_analyzer": "ik_sync_max_word"
      }
    }
  }
}

POST /lagou-es-synonym/_doc/1
{
"name":"拉勾是中国专业的互联网招聘平台"
}
POST /lagou-es-synonym/_doc/_search
{
"query": {
"match": {
"name": "lagou"
}
}
}
  • 结果
#! Deprecation: [types removal] Specifying types in search requests is deprecated.
{
  "took" : 1,
  "timed_out" : false,
  "_shards" : {
    "total" : 1,
    "successful" : 1,
    "skipped" : 0,
    "failed" : 0
  },
  "hits" : {
    "total" : {
      "value" : 1,
      "relation" : "eq"
    },
    "max_score" : 0.41501677,
    "hits" : [
      {
        "_index" : "lagou-es-synonym",
        "_type" : "_doc",
        "_id" : "1",
        "_score" : 0.41501677,
        "_source" : {
          "name" : "拉勾是中国专业的互联网招聘平台"
        }
      }
    ]
  }
}
森林森
关注
  • 0
    点赞
  • 踩
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
elasticsearch-analysis-ik-7.3.0.7z
08-16
elasticsearch ik分词器 19.8.16 最新版本。 github：https://github.com/medcl/elasticsearch-analysis-ik/releases
最新版linux elasticsearch-7.13.0-linux-x86_64.tar.gz
05-25
最新版linux elasticsearch-7.13.0-linux-x86_64.tar.gz最新版linux elasticsearch-7.13.0-linux-x86_64.tar.gz
Linux学习（九）：安装ElasticSearch 7.3
o,captain,my captain!
01-04 389
参考： https://blog.csdn.net/weixin_34218579/article/details/91730545 https://blog.csdn.net/weixin_37281289/article/details/101483434 https://blog.csdn.net/happyzxs/article/details/89156068 文章目录1. 下载ES...
Elasticsearch-7.13.2 安装
m0_67391907的博客
03-25 1080
elasticsearch下载地址 https://www.elastic.co/cn/downloads/elasticsearch 上传安装包 elasticsearch-7.13.2-linux-x86_64.tar.gz 将ES解压到当前目录 [linux@localhost software]$ tar -zxvf elasticsearch-7.13.2-linux-x86_64.tar.gz -C /opt/module/ 修改配置文件 [linux@localhost elasticsea
elasticsearch7.13.3
小生不才的博客
07-17 329
1.官网下载(https://www.elastic.co/cn/downloads/) 我这以最新版的7.13.3为例 2.解压 解压目录无中文和特殊字符 3.启动 4.访问 浏览器地址栏中输入http://localhost:9200 若是访问到类似上图的json信息表示ES正常运行 ...
ElasticSearch7.3学习---logstash三大插件（input、filter、output）及其综合示例.doc
07-12
ElasticSearch7.3学习---logstash三大插件（input、filter、output）及其综合示例 ElasticSearch7.3学习---logstash三大插件（input、filter、output）及其综合示例，这篇文档主要介绍了Logstash中的三大插件：...
elasticsearch-analysis-ik-7.3.2.zip
09-15
elasticsearch-analysis-ik-7.3.2 最新版本（2019.09.15） ES中文分词器：ik分词器
高级elasticsearch-7.3应用
01-05
ES搭建和使用以及项目实战
elasticsearch-analysis-ik-7.3.0.zip
08-08
分词库 7.3版本 elasticsearch和kibana7.3一起使用。windows 64位版本。
最新版linux elasticsearch-7.13.1-linux-x86_64.tar.gz
06-04
最新版linux elasticsearch-7.13.1-linux-x86_64.tar.gz最新版linux elasticsearch-7.13.1-linux-x86_64.tar.gz
elasticsearch-7.3.0-windows-x86_64.7z.001
04-28
ELK配置配置发布包，解决国内访问Github网速慢的问题 https://github.com/elastic/elasticsearch
最新版windows elasticsearch-7.13.4-windows-x86_64.zip
07-22
最新版windows elasticsearch-7.13.4-windows-x86_64.zip最新版windows elasticsearch-7.13.4-windows-x86_64.zip
最新版 elasticsearch-analysis-ik-7.9.3.zip
11-03
最新版 elasticsearch-analysis-ik-7.9.3.zip
docker 安装 elasticsearch 7.3.0
风行天下
11-14 1203
docker 安装 elasticsearch 7.3.0
es设置远程分词器
xiang_yu_pai的博客
07-11 276
远程可以去nginx上配置，nginx上找资源默认去nginx/html上找 在es配置上设置 <entry key="remote_ext_dict"></entry>
ElasticSearch IK Analyzer 远程扩展字典remote_ext_dict无效
CodingAnHour
10-30 2171
<?xml version="1.0" encoding="UTF-8"?> <!DOCTYPE properties SYSTEM "http://java.sun.com/dtd/properties.dtd"> <properties> <comment>IK Analyzer 扩展配置</comment> <!--用户可以在这里配置自己的扩展字典 --> <entry key="ext_dict">custom
ElasticSearch 7.3.0安装IK分词器
m0_67401545的博客
08-29 657
下载后解压插件安装完插件后，重启ElasticSearch，看到控制台有loaded plugin [analysis-ik]即安装成功：如下图或者访问查看ElasticSearch所安装的插件。
org.apache.http不存在解决办法
热门推荐
不忘初心的博客
01-05 6万+
一、认识国际化资源文件   这个类提供软件国际化的捷径。通过此类，可以使您所编写的程序可以：          轻松地本地化或翻译成不同的语言          一次处理多个语言环境          以后可以轻松地进行修改，支持更多的语言环境   说的简单点，这个类的作用就是读取资源属性文件（properties），然后根据.properties文件的名称信息（本地化信息），
centos8.0安装elasticsearch7.3.0版本
Lizper的博客
02-11 1097
centos8.0安装elasticsearch7.3.0版本1、下载elasticsearch7.3.02、安装JDK1.83、配置elasticsearch 1、下载elasticsearch7.3.0 https://artifacts.elastic.co/downloads/elasticsearch/elasticsearch-7.3.0-linux-x86_64.tar.gz 下载完成后上传至服务器并解压 2、安装JDK1.8 elasticsearch是需要JDK环境的，如果服务器未配置J
如何安装elasticsearch x-pack
最新发布
06-10
下面简单介绍一下如何安装 Elasticsearch X-Pack。 1. 下载 Elasticsearch X-Pack 插件 你可以从 Elastic 官网下载对应版本的 X-Pack 插件，链接为：https://www.elastic.co/cn/downloads/x-pack。 2. 安装 ...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值