nlp学习笔记
nlp难点一个意思具有多种表达方式;而是一词多义(Ambiguity);如何解决一词多义现象:在没有上下文(context)的情况下,可以主观判断一下;搭建一个机器翻译系统:从语料库中匹配目标单词,其缺点在于:语法不对,速度慢可以通过AI的方法(模型)解决。如何保证语法的正确性:中文首先要分词,找到对应词,对词进行排列组合,将组合应用在模型(Language Model)上,得到一个概率,选最好的。其中的计算量特别大,采用算法解决。Decoding algorithm and viterb algo






