[Elasticsearch] 向已存在的索引中添加自定义filter/analyzer

最新推荐文章于 2024-09-20 17:09:24 发布

dm_vincent

最新推荐文章于 2024-09-20 17:09:24 发布

阅读量1.8w

点赞数 2

分类专栏： Elasticsearch Search 文章标签： analyzer elasticsearch 维护索引

本文链接：https://blog.csdn.net/dm_vincent/article/details/46996021

版权

在Elasticsearch应用升级过程中，可能需要向现有索引添加自定义Analyzer。由于直接更新会抛出索引已存在的错误，本文介绍了两种解决方案：一是备份数据、删除并重建索引，二是使用_open和_close端点，在关闭索引后进行更新，以避免重建的麻烦。

摘要由CSDN通过智能技术生成

问题描述

随着应用的不断升级，索引中的类型也会越来越多，新增加的类型中势必会使用到一些自定义的Analyzer。但是通过_settings端点的更新API不能直接在已经存在的索引上使用。在sense中进行更新时会抛出异常：

PUT /symbol
{
  "settings": {
    "analysis": {
      "filter": {
        "edgengram": {
           "type": "edgeNGram",
           "min_gram": "1",
           "max_gram":

最低0.47元/天解锁文章

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

dm_vincent

关注关注

2
点赞
踩
8

收藏

觉得还不错? 一键收藏
3
评论
分享

复制链接

分享到 QQ

分享到新浪微博

扫一扫
举报

举报

专栏目录

Elasticsearch中什么是 tokenizer、analyzer、filter ?

悟已往之不谏，知来者之可追

07-03

2923

Elastic search 是一个能快速帮忙建立起搜索功能的，最好之一的引擎。搜索引擎的构建模块大都包含 tokenizers（分词器）, token-filter（分词过滤器）以及 analyzers（分析器）。这就是搜索引擎对数据处理和存储的方式，所以，通过上面的3个模块，数据就可以被轻松快速的查找。下面讨论下， tokenizers（分词器）, token-filter（分词过滤器）以及 analyzers（分析器）是如何工作的? Tokenizers(分词器）分词，就是将一个字符串，按照

ES自定义Analyzer扩展IK分词

SPlus_SS的博客

01-21

677

IPS产品关键词搜索需求要对英文标题、品牌（英文）、规格属性（英文）、产品型号、描述属性、商品特征、关键搜索词等字段进行模糊匹配搜索前期由于拿不到数据也不清楚具体数据是什么样的,并且线上集群也没有安装IK分词器,于是做了两套方案一是直接使用模糊查询,二是使用分词查询后面因为开发进度问题,也一直拿不到正式数据,暂时使用第一套方案,若出现性能问题再做优化由于线上ES没有安装IK分词器,也不确定数据中会不会有中英文混合的数据,所以先自己用虚拟机搭了集群做实验,方便后期优化: 因为仅使用英文分词器,或中文分词

3 条评论您还未登录，请先登录后发表或查看评论

Elasticsearch 自定义过滤器示例

wei_bo_cai的博客

06-15

1996

Elasticsearch 自定义过滤器示例HTML strip Character Filter添加分析器参数标准分词器参数Lowercase token filter 小写标记过滤器创建分析器参数自定义组合使用一个更复杂的例子 HTML strip Character Filter 删除HTML从文本元素，并替换HTML实体与他们的解码值（例如，更换&用&）。html_strip使用的是Lucene的HTMLStripCharFilter。 GET /_analyze { "toke

ElasticSearch使用Analyzer进行分词

章全蛋的博客

03-18

542

文章目录ElasticSearch使用Analyzer进行分词Analysis 与 Analyzer使用 _analyze APIStandard Analyzer安装分词器 ElasticSearch使用Analyzer进行分词 Analysis 与 Analyzer Analysis：文本分析是把全文本转换成一系列单词(term / token) 的过程，也叫分词 Analysis 是...

Elasticsearch analyzer详解

最新发布

GaoChao_milushushu的博客

09-20

678

analyzer分析器，无论是内置的还是自定义的，是一个包含character filters（字符过滤器）、 token filters（令牌过滤器）、tokenizers（分词器）三个细分模块的包。flags：java正则表达式标志。Index Time：文档写入并创建倒排索引时期，其分词逻辑取决于映射参数。Search Time：搜索发生时期，其分词仅对搜索词产生作用。通过自定义映射替换规则，把特定的字符替换为指定字符。mappings：字符串数组，映射的key => value。

es 创建索引指定id_elasticsearch创建索引

weixin_39861498的博客

12-21

2028

1.通过elasticsearch-head 创建(1)登录localhost:9100(2)点击复合查询(3)输入内容(4)勾选易读，点击验证是否是JSON格式(5)点击提交请求，返回{"acknowledged":true}2.通过postman来创建索引：(1)选择请求格式PUT,输入请求访问地址：127.0.0.1:9200/peoper(2)选择下面的Body->raw->...

Elasticsearch analysis & 自定义 analyzers

weixin_34211761的博客

09-06

152

当一个 document 被索引时, 通常是对应每个 field 都生成一个倒排索引(Inverted Index)用于作为存储的数据结构, 关于倒排索引, 推荐炮哥之前写的一篇文章可以结合参考理解. 每个 field 的倒排索引是由「对应」于这个 field 的那些词语(term)所组成. 从而, 搜索的时候, 就可查到某个 document 是否含有(或者说命中)某些 t...

【Elasticsearch 权威指南学习笔记】自定义分析器

深漂小码哥

07-07

474

虽然Elasticsearch带有一些现成的分析器，然而在分析器上Elasticsearch真正的强大之处在于，你可以通过在一个适合你的特定数据的设置之中组合字符过滤器、分词器、词汇单元过滤器来创建自定义的分析器。一个分析器就是在一个包里面组合了三种函数的一个包装器，三种函数按照顺序被执行: 字符过滤器字符过滤器用来整理一个尚未被分词的字符串。例如，如果我们的文本是HTML格式的，它会包含像<p>或者<div>这样的HTML标签，这些标签是我们不想索引的...

elasticsearch索引介绍.pptx

08-16

在本讲座中，我们将深入探讨Elasticsearch中的索引概念及其重要性。首先，让我们理解一下ES中的“索引”是什么。在MySQL等传统关系型数据库中，索引用于加速查询速度，而在ES中，索引是数据存储和检索的基本单位。...

es java api 创建索引结构_Elasticsearch创建索引和映射结构详解

weixin_42317626的博客

02-23

1183

前言这篇文章详细介绍了如何创建索引和某个类型的映射。下文中[address]指代elasticsearch服务器访问地址(http://localhost:9200)。1 创建索引1.1 简单创建语句curl -XPUT [address]/blog1.2 带参数的创建语句curl -XPUT [address]/blog/ -d '{"settings":{"numb...

Elasticsearch Mapping 中配置自定义Analyzer

gnufre的专栏

05-20

1253

多字段特性默认text 类型会有一个keyword 字段类型什么情况下使用多字段？公司名字实现精确匹配使用不同的Analyzer 不同语言 pinyin字段的搜索还支持为搜索和索引指定不同的analyzer 精确值和全文本区别：精确值不需要做分词处理 自定义Analyzer 介绍 Character Filters 在Tokenizer 之前对文本进行处理，例如增加删除及替换字符，可以配置多个Character Filters 。会影响TOkenize.

elasticsearch过滤器filter：原理及使用

热门推荐

码到三十五

06-17

1万+

在Elasticsearch 7及以上版本中，过滤器的概念已经逐渐被查询（Query）中的布尔子句（Bool Clause）所取代。尽管在之前的版本中，过滤器被用于快速筛选文档而不计算得分，但在新版本中，这种功能已经集成到了查询的布尔子句中。通过使用布尔子句中的filter子句，我们可以实现与过滤器相似的功能，同时保持查询的灵活性。通过深入了解过滤器的原理和使用方式，并结合DSL构建查询语句，我们可以更好地利用Elasticsearch进行数据检索和处理。

ES mapping 映射参数第一期之~ Analyzer

qq_43751598的博客

06-28

728

官方解释：以将字符串转换为标记或术语流。白话：根据选择不同的分析器进行语句拆分。 Analyzer 由三部分组成：字符过滤器、标记器和标记过滤器：接收原字符流，通过添加、删除或者替换操作改变原字符流。例如：去除文本中的html标签，或者将罗马数字转换成阿拉伯数字等。一个字符过滤器可以有零个或者多个：分词器接收一个字符流，将其分解为单个令牌（通常是单个单词），并输出一个令牌流。例如，whitespace标记器在看到任何空格时将文本分解为标记。它会将文本 "Quick brown fox!"转换为术

全文检索 Elasticearch 多条件检索过滤检索分词检索

weixin_45626288的博客

10-16

1145

Elasticearch 1.ElasticaSearch安装2. elasticsearch.yml3. 启动elasticsearch4. 使用Postman 创建索引库1. 使用postman或curl这样的工具创建：5. 创建 IDEA 项目1. 创建myes 项目2. 添加依赖3. 创建 application.yml 配置文件4. 在 config 包下创建MyElasticsearchConfig6. 创建测试类MyEsTest7. 创建启动类 MyEsApp8. 启动服务在控制台得到测试数

自定义编写ES6的 filter 函数

fanfan176的博客

11-18

224

自定义编写ES6的 filter 函数

ElasticSearch 自定义分词器Analyzer示例

qq_20068025的博客

03-12

4185

ElasticSearch已经内置了很多分词器，但有时候内置分词器并不能满足我们业务需求，此时就需要结合自身的业务意义，去自定义一个分词器了。本文以一个实际的业务例子为引子，带大家逐步自定义一个分词器。

ES设置自定义分词器

qq_45586240的博客

06-07

9810

Es提供了很多的分词方式，其中大家最常用的分词器应该是： ik_max_word（精细分词）ik_smart(简易分词)，我是es的初学者，工作中因为涉及到人名问题，领导提出想要把人名做同音词匹配处理（如：张三，张伞，张散），这三个人的名字的话都是zhangsan,这种情况，我们就需要用到拼音分词器。网上都有提供的，大家直接选择对应es版本的拼音分词器版本下载即可。直通车：拼音分词器链接。 1.下载成功之后呢，大家需要在Es的plugins文件夹下新建一个名字为pinyin的文件夹，然后把下载的拼音分词器的

Elasticsearch——索引配置、模板和重建详解

吴声子夜歌的博客

10-04

2260

使用keyword分词器、lowercase分词过滤、字符过滤器是html strip,这3部分构成一个分词器。上面示例返回分词结果是this is a test,其中html_strip过滤掉了html字符。也可以指定索引进行分词。

ElasticSearch51：索引管理_内核级知识点_深入探秘type底层数据结构

一枚程序员的博客

01-08

251

1.每个index对应的type底层结构是怎样的？ type，是一个index中用来区分类似的数据的数据结构，但是可能有不同的field，而且有不同的属性来控制索引建立、分词器 field的value，在底层的lucense中建立索引的时候，全部是opaque bytes类型，不区分类型。 lucense是没有type的概念，在document中，实际上是将type作为一个document的

Elasticsearch索引入门与Lucene原理解析

"此资源是一个关于Elasticsearch索引的PPT介绍，适合用于项目培训，内容涉及索引的创建、管理以及文档的...这个PPT提供了全面的ES索引基础和实践指导，对于理解和掌握Elasticsearch的索引管理和数据处理非常有帮助。