Elasticsearch Analyzer(分词器介绍)

最新推荐文章于 2024-04-28 13:17:57 发布
最新推荐文章于 2024-04-28 13:17:57 发布
阅读量571 收藏
点赞数
分类专栏： elasticsearch 文章标签： elasticsearch
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yutanbo123/article/details/119207635
版权

Elasticsearch Analyzer

前言

Analysis：文本分析是把全文本转换成一系列单词(term/token)的过程，也叫分词。Analysis 是通过 Analyzer 来实现的，可以使用 ES 内置的分析器，也可使用定制的分析器。在写入数据和查询数据的时候，都需要用相同的分析器对语句进行分析。

Analyzer

Analyzer 分词器是专门处理分词的组件，由三部分组成：Character Filters(处理原始文本，例如去除html、特殊字符)、Tokenizer(按照规则切分为单词)、Token Filters(将切分的单词加工，小写、删除 stopwords(停用词)，增加同义词)。

最低0.47元/天 解锁文章
yutanbo123
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
ElasticSearch 分词器
@码农充电站的专栏
02-08 332
本节介绍 ElasticSearch 如何进行分词以及分词器相关内容。
elasticsearch 安装分词扩展 icu_analyzer
huangweibbk的专栏
11-15 1466
进入 elasticsearch的 bin 目录 D:\elasticsearch-7.15.1\bin>elasticsearch-plugin install icu_analyzer 重启 elasticsearch 后。我们用postman 测试 POST /_analyze HTTP/1.1 Host: localhost:9200 Content-Type: application/json Content-Length: 58 { "analyzer": "icu_anal
Elasticsearch内置分析器全面解析
最新发布
一起coding，一起嗨。
04-28 409
Elasticsearch内置分析器全面解析
四、elasticSearch分词器(Analysis和Analyzer)
weixin_45370502的博客
05-21 435
elasticSearch分词器(Analysis和Analyzer) 分词器
ElasticSearch中analyzer和search_analyzer
weixin_42638762的博客
05-02 5991
1. 基础介绍 analyzer：插入文档时，将text类型的字段做分词然后插入倒排索引。 search_analyzer：查询时，先对要查询的text类型的输入做分词，再去倒排索引中搜索。 如果想要让'索引'和'查询'时使用不同的分词器，ElasticSearch也是能支持的，只需要在字段上加上search_analyzer参数。索引时，只会去看字段有没有定义analyzer，有定义的话就用定义的，没定义就用es预设的。查询时，会先去看字段有没有定义search_analyzer，如果没有定义，就去
索引模块-ICU分析插件（ICU Analysis Plugin）
zhengun的专栏
05-26 871
ICU Analysis Plugin The ICU analysis plugin allows for unicode normalization, collation and folding. The plugin is called elasticsearch-analysis-icu. The plugin includes the following analysis com...
elasticsearch-analysis-ik 7.17.16 分词器
01-10
Elasticsearch-analysis-ik是一个将Lucence IK分词器集成到elasticsearch的ik分词器插件，并且支持自定义的词典。
Elasticsearch IK分词器扩展说明1
08-08
"Elasticsearch IK分词器扩展说明" Elasticsearch IK分词器扩展说明是基于Elasticsearch的IK分词器的扩展，旨在实现高效的文本处理和搜索功能。IK分词器是一种基于Java实现的中文分词器，能够对中文文本进行精准的...
ik分词器7.17.10
06-19
ik分词器7.17.10
elasticsearch-6.2.4-ik分词器
10-11
Linux-CentOS环境下：分布式索引服务-elasticsearch-6.2.4版本及ik分词器整包，包括（elasticsearch-6.2.4.tar.gz，ik-analyzer.zip）
windows版本ES7.17.3中文分词器elasticsearch-analysis-ik-7.17.3 .zip
02-05
用于elasticsearch7.17.3这个版本的ik中文分词器，考虑到官网有时网络不稳定下载不下来，这里特意上传，方便大家使用； 目录结构如下： config -- 文件夹 plugin-security.policy plugin-descriptor.properties ...
multilingual-sentence-splitter:多语言分词工具
06-08
多语言分词器 多语言分词工具 此工具用于拆分多种语言的句子。 它目前正在开发中，最好支持罗Maven字的语言。 但是，我们正在Swift取得进展，以使该工具对任何可能的语言都表现良好。 ＃＃＃要求 Python 2.7 ＃＃＃用法 python scripts/nb_multi_split.py input_file_name > output
PHP的ES入门（四）—— 数据查询和分词器问题
m0_37654408的博客
03-28 705
大神请看 本文不一定写的全部都对，如果有哪里写得不好或者不对，可以提但请不要喷，不喜勿看绕道走就是了，虽然有可能在一些小知识点上会误导小白，但是还是可以看看基础的ES操作，对于使用还是一点帮助的 插入数据 先插入一批能适用于我们要讲解的数据 $config = [ 'host' => '127.0.0.1', 'port' => 9200, ]; $indexName ...
ES搜索(ElasticSearch)(二) 版本安装
YLJ_CSDN的博客
07-05 311
ElasticSearch 7.8版本需要 Java JKD11 环境。如果你的机器还没安装 Java JDK，可以自行Baidu搜索解决，注意要保证环境变量JAVA_HOME正确设置。 安装完 Java，就可以跟着官方文档安装 ElasticSearch 。直接下载压缩包比较简单，本文章使用的是Windows elasticsearch7.7.1.zip 但是 现实情况可能是你的项目还在使用JDK8或者JDK9等，低于ElasticSearch 7.8版本的JDK要求，怎么办? 解决方法：专门为ES指定J
ES之分析器(Analyzer)
u011250186的博客
07-10 5112
ES-分词器(Analyzer)
初学Elasticsearch，Analyzer分词器使用
gao7yang13的专栏
04-11 334
analyzer standard：根据词切分，将大写字母转成小写字母，in不过滤 GET /_analyze { "analyzer":"standard", "text":"Mastering Elasticsearch, elasticsearch in Action" } simple：按照非字母切分，非字母的都被去除，将大写字母转成小写字母 GET /_analyze {...
Elasticsearch 内置分析器Analyzer
ywl470812087的博客
01-02 1986
java学习讨论群：725562382 无论是内置的分析器（analyzer），还是自定义的分析器（analyzer），都由三种构件块组成的：character filters，tokenizers，token filters。 内置的analyzer将这些构建块预先打包到适合不同语言和文本类型的analyzer中。 Character filters （字符过滤器） ...
elasticsearch文档-analysis
pan-zy的专栏
05-15 2472
原文地址
【ES】ElasticSearch analyzer 和 analyze API
w1992wishes的博客
10-12 1693
文章目录一、分词二、分析器 analyzer2.1、简介2.2、中文分析器2.2.1、离线安装2.2.2、在线安装（推荐）2.2.3、 ik_max_word 和 ik_smart 区别2.3、自定义分析器三、analyze api3.1、写时分词3.2、读时分词 一、分词 搜索引擎的核心是倒排索引，而倒排索引的基础就是分词。所谓分词可以简单理解为将一个完整的句子切割为一个个单词的过程。在 es ...
elasticsearch安装分词器
08-25
要在Elasticsearch中安装分词器，您可以按照以下步骤操作： 1. 首先，确保您已经安装了Elasticsearch。您可以从Elasticsearch官方网站下载并安装适合您操作系统的版本。 2. 打开终端或命令提示符，并导航到Elasticsearch的安装目录。 3. 在Elasticsearch的安装目录下，找到`config`文件夹。在该文件夹中，您会找到一个名为`elasticsearch.yml`的配置文件。 4. 使用文本编辑器打开`elasticsearch.yml`文件，并添加以下配置项： ``` index.analysis.analyzer.<analyzer_name>.type: custom index.analysis.analyzer.<analyzer_name>.tokenizer: <tokenizer_name> index.analysis.analyzer.<analyzer_name>.filter: <filter_name> ``` 在上述配置中，将`<analyzer_name>`替换为您自定义的分析器名称，`<tokenizer_name>`替换为所需的分词器名称，以及`<filter_name>`替换为您需要使用的过滤器名称。 5. 保存并关闭`elasticsearch.yml`文件。 6. 启动或重启Elasticsearch服务，以使更改生效。 完成上述步骤后，您的分词器将被安装并可用于索引和搜索过程中的文本分析。请确保选择合适的分词器和过滤器，以满足您的需求和语言环境。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值