语言模型srilm（一）基本用法

最新推荐文章于 2021-10-26 19:16:59 发布

过得很好梵蒂冈

最新推荐文章于 2021-10-26 19:16:59 发布

阅读量589

点赞数

本文链接：https://blog.csdn.net/qq_44944990/article/details/89421377

版权

本文介绍了SRILM语言模型的基本训练方法，包括两种训练方式和打分、剪枝、合并等操作。此外，还详细讲解了如何使用词典限制语言模型。

摘要由CSDN通过智能技术生成

                        
                    
                  
  
   
  
         
 一、基本训练 
 基本参数 
 ##功能#读取分词后的text文件或者count文件，然后用来输出最后汇总的count文件或者语言模型##参数#输入文本：#  -read 读取count文件#  -text 读取分词后的文本文件#词典文件：#  -vocab 限制text和count文件的单词，没有出现在词典的单词替换为<unk>；如果没有，所有的单词将会被自动加入词典#  -limit-vocab 只限制count文件的单词（对text文件无效），没有出现在词典里面的count将会被丢弃#  -write-vocab 输出词典#语言模型：#  -lm 输出语言模型#  -write-binary-lm 输出二进制的语言模型#  -sort 输出语言模型gram排序
  
  
  1
2
3
4
5
6
7
8
9
10
1