IKAnalyzer

最新推荐文章于 2023-03-04 16:42:56 发布
最新推荐文章于 2023-03-04 16:42:56 发布
阅读量493 收藏
点赞数
分类专栏： java
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/huaweitman/article/details/52334244
版权

IKAnalyzer 中文分词库源码已迁移到 Git@OSC

oschina 发布于： 2015年01月22日 ( 34评)
分享到： 
收藏 +58

【珠海】OSC源创会第52期报名开始！ >>>»  

IKAnalyzer 是一个非常著名和老牌的 Java 中文分词库，目前 OSChina 网站也是使用 IK 分词器。IKAnalyzer 的代码一直放在 Google Code 的，你知道的，Google Code 系统做得比较“糟糕”，经常无法访问。

为了方便开发者快速方便获取代码，IKAnalyzer 的作者 @林良益 已经将项目源码托管到 Git@OSC 平台，项目地址是：

http://git.oschina.net/wltea/IK-Analyzer-2012FF

huaweitman
关注
专栏目录
elasticsearch插件六—— 分词 IK analyzer插件安装详解
铭毅天下Elasticsearch
05-21 1万+
一、 IK Analyzer 介绍IK Analyzer是一个开源的，基于Java语言开发的轻量级的中文分词工具包，最初的时候，它是以开源项目Lucene为应用主体的，结合词典分词和文法分析算法的中文分词组件，从3.0版本之后，IK逐渐成为面向java的公用分词组件，独立于Lucene项目，同时提供了对Lucene的默认优化实现，IK实现了简单的分词 歧义排除算法，标志着IK分词器从单纯的词典分词向
中文分析器IK Analyzer
qibulemingzi的博客
01-23 1552
一、中文分析器IK Analyzer   IK Analyzer 是一个开源的，基亍 java 语言开发的轻量级的中文分词工具包。从 2006年 12 月推出 1.0 版开始， IKAnalyzer 已经推出了 4 个大版本。最初，它是以开源项目Luence 为应用主体的，结合词典分词和文法分析算法的中文分词组件。从 3.0 版本开始，IK 发展为面向 Java 的公用分词组件，独立亍 Lucene 项目，同时提供了对 Lucene 的默认优化实现。在 2012 版本中，IK 实现了简单的分词歧义排除算法，
Lucene使用IKAnalyzer中文分词笔记
weixin_33832340的博客
09-02 121
2019独角兽企业重金招聘Python工程师标准>>> ...
ElasticSearch ik分词器基础知识analyzer
张俊杰 的博客
11-06 1208
概述 有两种analyzer，你根据自己的需要自己选吧，但是一般是选用ik_max_word 如果是ik_max_word的话: 会将文本做最细粒度的拆分，比如会将“中华人民共和国国歌”拆分为“中华人民共和国,中华人民,中华,华人,人民共和国,人民,人,民,共和国,共和,和,国国,国歌”，会穷尽各种可能的组合； 如果使用ik_smart的话 会做最粗粒度的拆分，比如会将“中华人民共和国国歌”拆分为“中华人民共和国,国歌”。 如果我们搜索"共和国" 搜到吗？ 这样就搜不到的. 结论 一般我们是使用ik_m
IKAnalyzer3.2.5Stable.jar
10-25
IKAnalyzer是一款基于Java语言开发的全文检索分析器，主要用于对中文文本进行高效的分词处理。在标题中的"IKAnalyzer3.2.5Stable.jar"指的是该软件的特定版本，即3.2.5稳定版的Java档案文件（JAR）。这种格式的文件...
ikanalyzer-solr8.4.0_solr8_solr_ikanalyzer_中文分词_
10-02
ikanalyzer 是一个专门为Java开发的中文分词器，它基于 Lucene 库，适用于各种文本处理和搜索引擎场景。在 Solr 环境中，ikanalyzer 的作用是为中文文档提供精确的分词服务，从而提升搜索质量和效率。Solr8.4.0 是 ...
IKAnalyzer2012_u6中文分词器以及手册正式版.zip
06-06
IKAnalyzer2012_u6中文分词器以及手册正式版 Mode LastWriteTime Length Name ---- ------------- ------ ---- d----- 2017/10/29 1:41 doc -a---- 2017/10/29 1:41 414 IKAnalyzer.cfg.xml -a---- 2017/10/29 1...
Ikanalyzer分词器动态自定义词库的方法.doc
03-08
IKAnalyzer动态自定义词库的方法 IKAnalyzer是java语言中一个流行的分词器工具，能够对中文文本进行分词操作。分词是自然语言处理（NLP）中的一项基本操作，用于将文本分割成单个词语，以便进行进一步的处理和分析...
IKAnalyzer 3.0 中文分词器
07-21
1.IKAnalyzer3.0介绍 IKAnalyzer是一个开源的，基于java语言开发的轻量级的中文分词工具包。从2006年12月推出1.0版开始，IKAnalyzer 已经推出了3个大版本。最初，它是以开源项目Luence为应用主体的，结合词典分词和文法分析算法的中文分词组件。新版本的IKAnalyzer3.0 则发展为面向Java的公用分词组件，独立于Lucene项目，同时提供了对Lucene的默认优化实现。 1.2IKAnalyzer3.0特性 * 采用了特有的“正向迭代最细粒度切分算法“，具有50万字/秒的高速处理能力。 * 采用了多子处理器分析模式，支持：英文字母（IP地址、Email、URL）、数字（日期，常用中文数量词，罗马数字，科学计数法），中文词汇（姓名、地名处理）等分词处理。 * 优化的词典存储，更小的内存占用。支持用户词典扩展定义 * 针对Lucene全文检索优化的查询分析器IKQueryParser(作者吐血推荐)；采用歧义分析算法优化查询关键字的搜索排列组合，能极大的提高Lucene检索的命中率。
IKAnalyzer 作者林良益访谈实录
likika2012的专栏
12-03 1594
关于开源访谈 开源访谈是开源中国推出的一系列针对国内优秀开源软件作者的访谈，以文字的方式记录并传播。我们希望开源访谈能全面的展现国内开源软件、开源软件作者的现状，着实推动国内开源软件的应用与发展。 【嘉宾简介】 林良益 一位资深的Java程序员，多个开源项目的发起者。有11年的程序开发和设计经验。从事过电信，证券，政府，互联网等多个领域的系统开发与设计。现任畅游福州分
IKAnalyzer 详细介绍
tao_wei162的博客
01-10 287
IK Analyzer 是一个开源的，基于java语言开发的轻量级的中文分词工具包。从2006年12月推出1.0版开始， IKAnalyzer已经推出了4个大版本。最初，它是以开源项目Luence为应用主体的，结合词典分词和文法分析算法的中文分词组件。从3.0版本开始，IK发展为面向Java的公用分词组件，独立于Lucene项目，同时提供了对Lucene的默认优化实现。在2012版本中，IK实...
IKAnalyzer 中文分词器
yhqbsand
09-13 9531
1.IK Analyzer 2012 介绍 IK Analyzer 是一个开源的,基于 java 语言开发的轻量级的中文分词工具包。从 2006年 12 月推出 1.0 版开始, IKAnalyzer 已经推出了 4 个大版本。最初,它是以开源项目Luence 为应用主体的,结合词典分词和文法分析算法的中文分词组件。从 3.0 版本开始,IK 发展为面向 Java 的公用分
ElasticSearch Analyzer默认分词器、ik分词器、远程词典、停用词（五）
CodingAnHour
05-20 1938
一、名词解释 Analysis：文本分析是把全文本转换一系列单词（trem/token）的过程，也叫分词 Analysis是通过Analyzer来实现的 可以使用es内置分析器，或按需定制化分析器 除了在数据写入时转换词条，匹配query语句时也需要用相同的分析器对查询语句进行分析 分词器时专门处理分词的组件，Analyzer又三部分组成 Character Filters（针对原始文本处理，例如去除HTML） Tokenizer：按照规则切分单词 Token Filter：将切分的单词进
IK分词器原理研磨及源码改造，更适用生产
qq_41042003的博客
08-27 1433
文章目录简介分析结构分词器智能分词（分词歧义处理）停用词处理量词处理ik配置及在Solr中的配置使用改造测试 简介 IK分词全名为IK Analyzer IK分词是一款国人作者林良益开发的相对简单的中文分词器，IKAnalyzer 是一个开源的，基于java语言开发的轻量级的中文分词工具包。从2006年12月推出1.0版开始，IKAnalyzer已经推出 了3个大版本。最初，它是以开源项目 Lucene为应用主体的，结合词典分词和文法分析算法的中文分词组件。新版本的IKAnalyzer3.0则发展为 面向J
Elasticsearch分析器（Analyzer）
最新发布
03-04 526
必须与Elasticsearch版本一致，解压后放到Elasticsearch的plugins文件夹下，重启Elasticsearch服务即可。
Elasticsearch安装中文分词器IK Analyzer
qq_40800602的博客
11-24 2275
提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录前言一、pandas是什么？二、使用步骤1.引入库2.读入数据总结 前言 提示：这里可以添加本文要记录的大概内容： 例如：随着人工智能的不断发展，机器学习这门技术也越来越重要，很多人都开启了学习机器学习，本文就介绍了机器学习的基础内容。 提示：以下是本篇文章正文内容，下面案例可供参考 一、pandas是什么？ 示例：pandas 是基于NumPy 的一种工具，该工具是为了解决数据分析任务而创建的。 二、使用步骤 1.引入库 代.
Lucene 中文分词器概述 与 Ik-Analyzer 使用教程
热门推荐
蚩尤后裔-汪茂雄
08-31 3万+
目录 Ik-Analyzer 简介 GoogleCode 官网介绍 IK Analyzer 2012 特性 版本兼容 Ik-Analyzer 使用 Ik-Analyzer 下载 导入开发包 创建索引 查询索引 官方示例 Ik-Analyzer 简介 GoogleCode 开源项目 :http://code.google.com/p/ik-analyzer/，开发包下载地址：...
IKAnalyzer2012中文分词器使用手册
"IKAnalyzer中文分词器V2012_FF使用手册" IKAnalyzer中文分词器是一款基于Java开发的轻量级中文分词工具，适用于各种文本处理场景。自2006年12月发布1.0版本以来，它经历了多次重大更新，最初与Lucene项目紧密关联...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值