计算语言学基础概论

语言：自然语言--人类进化过程中产生，人来生来就可自然习得

计算：面向特定目标，(利用计算机)(按照某种方式)进行从输入到输出的变换

面向特定目标，利用计算机按某种方式(算法)对语言输入进行变换的科学

nlp的关键问题：

n判断是作为汉语的声音：语音层

n运用了汉语中的那些词组成：词汇层

n这些汉语词如何构成一个句子：句法层

n由这些词这样组成的句子的意义：语义层

n作者想通过这句话传达什么信息：语用层

所以：

nKey Problems in NLP：Ambiguity

nKey Task in NLP：Ambiguity resolution

how:  nKnowledge based Ambiguity resolution

//

语言处理需要的知识:

语言学的知识:

语音知识

词汇知识

句法知识

语义知识

语用知识

非语言学的知识:

常识知识

世界知识

文化知识

...

//

Source of knowledge

Human knowledge  (理性主义)

Common sense

Expert knowledge

…

Corpus                  (经验主义)

Raw corpus

Annotated corpus

…

//

Using knowledge:

nModel and Algorithm

//

代表性应用成果

搜索：http://www.wolframalpha.com/

翻译：http://translate.google.cn/

推荐：Amazon图书推荐…

IBM Watson：开放领域问答系统

2011年在美国问答竞赛节目《危险边缘》中战胜人类优胜者