自然语言处理
文章平均质量分 93
看什么看
这个作者很懒,什么都没留下…
展开
-
Cursor太强了,从零开始写ChatGLM大模型的微调代码
初试基于chatgpt4的写代码神器原创 2023-03-19 16:05:10 · 4868 阅读 · 3 评论 -
虚拟机内搭建ltp-server步骤
虚拟机内搭建ltp-server步骤虚拟机配置虚拟机安装网络配置ltp-server安装ltp-client使用LTP是哈工大社会计算与信息检索研究中心研发的系列中文自然语言处理工具,可以由网络服务的形式进行使用,也就是ltp-server。本文使用的ltp源码与模型版本都是3.4.0。ltp模型下载linux版源码下载安装ltp步骤参考文档cmake源码虚拟机配置(我用的是w...原创 2019-12-17 11:32:30 · 574 阅读 · 0 评论 -
ltp分词后处理——强制分词模块
为了解决这个问题:我使用分词(词性标注)词典了,但是为什么某些词典词还是被切开了(词性没有按照字典标注) 官方解释为:ltp的分词(词性标注)模块 并非采用词典匹配的策略 ,外部词典以特征方式加入机器学习算法,并不能保证所有的词都是按照词典里的方式进行切分(标注)。 如果要完全按照词典匹配的方式切词(标注),您可以尝试对结果进行后处理。 为此我自己写了一个后处理模块,用来将切开了的词进行合并(...原创 2018-07-09 17:53:05 · 3839 阅读 · 4 评论