IK分词器

最新推荐文章于 2021-03-06 14:53:53 发布
最新推荐文章于 2021-03-06 14:53:53 发布
阅读量254 收藏
点赞数
分类专栏： ElasticSearch
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/tripleDemo/article/details/101164510
版权

启动elasticsearch地址栏输入http://127.0.0.1:9200/_analyze?analyzer=chinese&pretty=true&text=我是程序员

注意：6点几的版本要用post方式分词,分词器和查询词需要以json的形式写在body里

5版本
在这里插入图片描述
6版本
在这里插入图片描述

GitHub上获取IK分词器：https://github.com/medcl/elasticsearch-analysis-ik/releases

1.将解压后的文件夹重命名为ik
2.将ik文件夹拷贝到elasticsearch/plugins目录下
3.重新启动即可加载IK分词器

IK分词器测试

IK提供了两个分词算法ik_smart和ik_max_word
ik_smart为最少切分
ik_max_word为最细粒度划分
在这里插入图片描述
在这里插入图片描述

自定义词库

步骤：
1.进入elasticsearch/plugins/ik/config目录新建.dic文件编辑词
2.修改elasticsearch/plugins/ik/config/IKAnalyzer.cfg.xml文件，重启elasticsearch
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

荒城浪臻
关注
专栏目录
进阶-第30__彻底掌握IK中文分词_IK分词器配置文件讲解以及自定义词库实战
qq_35524586的博客
03-14 554
1、ik配置文件 ik配置文件地址：es/plugins/ik/config目录 IKAnalyzer.cfg.xml：用来配置自定义词库 main.dic：ik原生内置的中文词库，总共有27万多条，只要是这些单词，都会被分在一起 quantifier.dic：放了一些单位相关的词 suffix.dic：放了一些后缀 surname.dic：中国的姓氏 ...
IK 分词器
大数据进阶之路
02-29 320
IK 分词器 下载和安装 进入elasticsearch目录中执行以下命令： # 在线安装 [yangqi@yankee elasticsearch-7.3.0]$ ./bin/elasticsearch-plugin install https://github.com/medcl/elasticsearch-analysis-ik/releases/download/v7.3.0/elasti...
ik分词器
Hello World
11-03 155
ik分词器 分词: 即把一段中文或者别的划分成一个个的关键字,我们在搜索时候会把自己的信息进行分词,会把数据库中或者索引库中的数据进行分词,然后进行一个匹配操作。 默认的中文分词是将每个字看成一个词,比如“好好学习”会被分为"好",“好”,“学”,“习” ,这显然是不符合要求的,所以我们需要安装中文分词器ik来解决这个问题。 如果要使用中文,建议使用ik分词器! IK提供了两个分词算法: ik_ smart和ik_ max_ word ,其中ik_ smart为最少切分, ik_ max_ _word为最细
Solr IK分词器
02-07
solr 中文查询分词器，把一串字符分作多个词语进行查询
ik分词器7.17.10
06-19
**ik分词器7.17.10详解** 在中文搜索引擎和数据分析领域，分词器扮演着至关重要的角色。ik分词器是为Elasticsearch（ES）设计的一款高效、可扩展的中文分词工具，它能有效地将中文文本拆分成一个个独立的词语，便于...
IK分词器elasticsearch-analysis-ik-7.17.16
最新发布
12-24
**IK分词器详解** IK分词器是针对Elasticsearch设计的一款强大的中文分词插件，其全称为"elasticsearch-analysis-ik"。在Elasticsearch中，分词器的作用至关重要，它负责将用户输入的文本进行词汇切分，以便进行...
ik分词器tar包 7.10.2
03-03
**IK分词器详解** IK分词器是针对Elasticsearch（ES）的一款热门中文分词插件，其全称为“Intelligent Chinese Analyzer for Elasticsearch”。它由Java编写，旨在为中文文档提供高效、准确的分词处理。版本7.10.2...
elasticsearch7.8.0版本的IK分词器
12-30
**Elasticsearch 7.8.0 版本的 IK 分词器** Elasticsearch 是一个功能强大的开源全文搜索引擎，广泛应用于数据检索、数据分析和实时分析等场景。在中文处理方面，IK (Intelligent Chinese) 分词器是 Elasticsearch ...
elasticserach 7.17.4版本的中文 IK分词器
12-08
**Elasticsearch 7.17.4 版本中的中文 IK 分词器** Elasticsearch 是一个流行的、开源的全文搜索引擎，它基于 Lucene 库，并提供了分布式、实时、可扩展的搜索和分析功能。在处理中文文本时，一个合适的分词器是至...
analysis-ik中文分词器
06-30
IK Analyzer是一个开源的,基于Java语言开发的轻量级的中文分词工具包; 最初,它是以开源项目Luence 为应用主体的,结合词典分词和文法分析算法的中文分词组件;从 3.0 版本开始,IK 发展为面向 Java 的公用分词组件,独立亍 Lucene 项目
IK中文分词器资源包
11-30
IK中文分词器资源包
6.8.5IK分词器
03-17
1.IK分词器安装包，直接放在ES的plugins文件夹下解压就可以使用。如果需要配置自定义词典，将自己的.dic文件放在IK解压后的config即可，同时在IKAnalyzer.cfg.xml添加扩展词典或自定义的停词词典用英文分号（;）分隔即可（如：test.dic;extra_single_word_low_freq.dic）。 2.如果使用远程词库，在远程sever放置.txt自定义分词文件，使用http://ip:端口号/文件名.txt配置即可，远程停词文件配置再中。 注：这里存放远程扩展词典使用的是nginx,支持扩展词典热更新。nginx配置如下： server { listen 8222（访问端口号）; server_name localhost（访问ip）; root /dist（扩展词典在linux存放位置，根目录下/dist文件夹）; location / { index index.html test.txt（扩展词典文件）; # index test.txt; #autoindex on; } } 特别注意：在安装ES时不能使用root用户启动，需要通过Linux命令chown -R 用户名:用户名 /xxx/xxxx/(文件路径)，将ES文件夹授权给普通用户才可以启动。5.0以上版本的IK在配置时，可以不用在ES的.yml文件中配置，直接用就可由。 重要事情说三遍：ES版本必须和IK版本一样。 重要事情说三遍：ES版本必须和IK版本一样。 重要事情说三遍：ES版本必须和IK版本一样。
高版本IK分词器
11-06
IK分词器到后面就不再更新了，所以做了一个基于Lucene6.4.0的分词器
ElasticSearch的IK中文分词器
渊虹
03-06 1890
概述 本文主要介绍了 ik 分词器在es中的一些配置以及原理，包括 下载安装、如何设置es使用ik分词器、ik分词器与默认分词器的差异、ik分词自定义设置以及热更等等。 一、安装下载 ik分词器:https://github.com/medcl/elasticsearch-analysis-ik ik-es插件下载地址:https://github.com/medcl/elasticsearch-analysis-ik/releases ⚠️ 下载的ik版本需与es版本相同 二、...
【ElasticSearch】 中文分词器-IK分词器
liuerchong的博客
10-11 744
分词介绍 什么是分词 　　分词就是指将一个文本转化成一系列单词的过程，也叫文本分析，在Elasticsearch中称之为Analysis。 　　举例:我是中国人-->我/是/中国人 分词api 　　指定分词器进行分词 　　示例： 1 POST /_analyse 2 3 { 4 "analyzer": "standard", 5 "text": "hello world" 6 } 　　效果如下： 　　 　　在结果中不仅可以看出分词的结果，还返回了该词在文...
ElasticSearch实战之配置IK中分分词器(五)
小陈之JAVA
04-12 543
11. IK分词器 NOTE: 默认ES中采用标准分词器进行分词,这种方式并不适用于中文网站,因此需要修改ES对中文友好分词,从而达到更加的搜索的效果。 11.1 在线安装IK 在线安装IK (v5.5.1版本后开始支持在线安装 ) 1. 在es安装目录中执行如下命令 [es@linux elasticsearch-6.2.4]$ ./bin/elasticsearch-plugin ...
快速学习-IK分词器
逍遥云恋
01-07 394
4 IK分词器 4.1 测试分词器 在添加文档时会进行分词，索引中存放的就是一个一个的词（term），当你去搜索时就是拿关键字去匹配词，最终找到词关联的文档。 测试当前索引库使用的分词器： post 发送：localhost:9200/_analyze { "text": "测试分词器，后边是测试内容：spring cloud实战" } 结果如下： 会发现分词的效果将 “测试” 这个词拆分成...
ElasticSearch的IK分词器安装测试
smilefyou的博客
12-07 655
IK分词器 IK分词器对中文具有良好支持的分词器，包括ik_max_word和ik_smart， ik_max_word会将文本做最细粒度的拆分； ik_smart 会做最粗粒度的拆分； 测试（默认分词器） POST localhost:9200/_analyze {"text":"原世间美好与您环环相扣"} 下载安装es对应的IK分词器,解压后把整个jar包所在目录移动到es的plugs目录下(config下可配置分词文档) 测试（ik_smart和ik_max_word） POST localho
Solr配置中文分词器：IK分词器与Schema.xml详解
"ik分词器文档" 在Solr全文搜索服务中，IK分词器扮演着重要的角色，特别是在处理中文文本时。IK全称为“Intelligent Chinese”，它是一款高效的中文分词工具，常用于Solr和Elasticsearch等搜索引擎中，以实现对中文...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值