IK分词器
IK分词器IK分词器概念:不管是中文还是英文,都有很多次。如果不做分词,直接全匹配。那就匹配的信息很少。比如你收百度:"如何学习Java",你收到的不仅仅是是只有这个标题的信息。可能会有如何学习相关的信息。ik分词器提供了两种分词算法:ik_smart,ik_max_word.其中ik_smart为最少切分,ik_max_word为最细力切分。最少切分:会自动把我是中国人分成三个,累加就是所有的词汇。最细力度:穷尽所有,会根据词典,将所有词进行分词...
原创
2021-04-25 19:46:17 ·
590 阅读 ·
0 评论