笔记:语言模型(Language Model)(一)
笔记,总结纪录自《统计自然语言处理(第二版)(宗成庆)》语言模型(language model, LM)在自然语言处中,尤其是基于统计模型的语音识别、机器翻译、汉语自动分词、句法分析等相关研究中都有广泛的应用。其中最主要采用的是n元语法模型(n-gram),这种模型构建简单、直接,但因为数据缺乏需要采用平滑(smoothing)算法。一个语言模型中,通常构建为字符串s的概率分布p(s),反映的是字符
原创
2017-11-25 16:26:17 ·
6035 阅读 ·
1 评论