Ansj在线分词器
这是一个基于n-Gram+CRF+HMM的中文分词的java实现.分词速度达到每秒钟大约200万字左右(mac air下测试),准确率能达到96%以上 目前实现了.中文分词. 中文姓名识别 . 用户自定义词典,关键字提取,自动摘要,关键字标记等功能;可以应用到自然语言处理等方面,适用于对分词效果要求高的各种项目
以下为ansj官方相关项目地址
elasticsearch-analysis-ansj:
https://github.com/4onni/elasticsearch-analysis-ansj
ansj分词器:
https://github.com/NLPchina/elasticsearch-analysis-ansj
最近看看这个分词器感觉用在elasticsearch中还是比较不错的,对于中文的词处理速度以及分词的只能性还是比较可以的;刚好找到一个能在线测试ansj分词的网站
网站地址:https://www.itgongju.com/ansjAnalyze
分享一下,刚刚这个网站帮我测试下了你想分词的各种情况,如果你也有这方便的需求可以去试试。