- 博客(7)
- 资源 (26)
- 收藏
- 关注
RSS订阅原创 自然语言处理hanlp------6-1字典树的实现
目录前言一、字典树是什么？二、实现代码1.代码展示2.测试代码实测前言匹配算法的瓶颈之一在于如何判断词典中是否含有字符串，如果用有序集合（TreeMap）复杂度是O(logn),如果用散列列表(java的Hashmap或者Python的dict)，时间复杂度降低，但是内存复杂度上升所以需要自行设计算法一、字典树是什么？字典树（Trie、前缀树）和后缀树是单词处理的树形数据结构。约定用None表示节点不对应词语，这样不能插入None值了，但是实现起来更简洁二、实现代码1.代码展示代码如下
2020-12-23 21:09:51
477
原创 自然语言处理hanlp------5切分算法
提示：不再演示Python版目录一、完全切分式的中文分词算法二、正向最长匹配的中文分词算法三、逆向最长匹配的中文分词算法四、双向最长匹配的中文分词算法速度测评一、完全切分式的中文分词算法严格意义上，并不是真正的分词算法，极不准确案例代码如下：/** * 完全切分式的中文分词算法 * * @param text 待分词的文本 * @param dictionary 词典 * @return 单词列表 */ pu
2020-12-22 21:54:32
722
原创 自然语言处理hanlp------4词典
自然语言处理hankcs------4词典前言一、词库的格式了解二、词典的加载1.引入数据2.开始使用执行代码最后此篇over前言我们学习只考虑hanlp词典（其他词典：互联网词库和清华大学开放中文词库等）一、词库的格式了解第一列是词典的单词本身，第二列和第三列是词性与词频，当然一个词可能有很多词性，之后就会有第四列和第五列的词性和词频例如下图的二、词典的加载1.引入数据去GitHub下载对应使用的版本的资源包：将其复制后放置在idea如下结构位置：至于model，下..
2020-12-22 11:22:18
929
原创 自然语言处理hanlp------3java调用hanlp
提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档文章目录一、进入依赖库二、复制配置文件1.打开命令行2.复制hanlp.properties这个文件到src/main/resource下demo来一个一、进入依赖库<dependencies> <dependency> <groupId>com.hankcs</groupId> <artifactId>hanlp</artif
2020-12-21 14:03:17
396
原创 自然语言处理hanlp------2初体验
初体验：感受hanlp的常用功能例如：命令 hanlp segment哦豁，出师不利，可以看得出是numpy的问题，csdn查询后，更改numpy版本即可亲测升级版本并不好使，我该用了numpy==1.14.5成功了如下图输入案例(iterhui-hanlp) C:\Users\76709>hanlp segment商品和服务商品/n 和/cc 服务/vn我爱你中国我/rr 爱/v 你/rr 中国/ns我是程序员iterhui我/rr 是/vshi 程序员/nnt iterh
2020-12-19 15:16:34
326
1
原创 推荐一款浏览器必备插件， 一键解决多种问题
推荐一款浏览器必备插件， 一键解决多种问题文章目录前言一、不多比比，安装起来二、上手体验1.听说无脑按C就能有窗口？来！试试2.没有广告总结前言CSDN出了插件？？？！！！！！那还不赶紧上手试一试我先冲了，你们随意一、不多比比，安装起来https://plugin.csdn.net/?utm_source=chajian-contest-1210本地下载就完事了
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人