jieba分词,自定义词库分词 java语言

本文介绍在JAVA环境中使用Jeba进行分词的方法,包括引入Maven依赖、自定义词典及调用示例。通过加载自定义词典,Jeba能更准确地进行中文分词。

摘要生成于 C知道 ,由 DeepSeek-R1 满血版支持, 前往体验 >

其实这是一个解决JAVA端使用Jeba分词的方式。Jeba相较于其他产品的优势是双向匹配分词

GITHUB地址:https://github.com/huaban/jieba-analysis

第一步引用Maven

<!-- Jeba分词器 几年没更新了GitHub-->
<dependency>
	<groupId>com.huaban</groupId>
	<artifactId>jieba-analysis</artifactId>
	<version>1.0.2</version>
</dependency>

第二步自定义词词典:

创建的文件结构以及文件名称:dicts/jieba.dict

自定义的词典请放到:resource/dicts/jieba.dict

自定义词词库的内容

塑料 3 n
塑料管件 3 n
塑料管 3 n
管件 3 n

第三步调用:

public void contextLoadsJeba() {
        String text = "塑料管件" ;
		System.out.println( "Jeba 分词  -------------" );
		JiebaSegmenter segmenter = new JiebaSegmenter();

		System.out.println(segmenter.process( text , JiebaSegmenter.SegMode.INDEX).toString());
        System.out.println("加载自定义词库的信息,开始做自定义词库的分词------->>>>>>>>");
        // 词典路径为Resource/dicts/jieba.dict
        Path path = Paths.get(new File( getClass().getClassLoader().getResource("dicts/jieba.dict").getPath() ).getAbsolutePath() ) ;
        //加载自定义的词典进词库
        WordDictionary.getInstance().loadUserDict( path ) ;
        //重新分词
        segmenter = new JiebaSegmenter();
        System.out.println(segmenter.process( text , JiebaSegmenter.SegMode.INDEX).toString());
    }

搞定

 

评论 6
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值