NLP都能做些什么?基本任务都是?

1. 词法分析,对自然语言进行词汇层面的分析,是nlp基础性工作

   1.1 分词,对没有明显边界的文本进行切分,得到词序列

   1.2 新词发现,找出文本中具有新形势,新意义或是新用法的词

   1.3 形态分析, 分析单词的形态组成,包括词干,词根,词缀等

   1.4 词性标注,确定文本中每个词的词性,词性包括动词,名词,代词等.

  1.5 拼写校正,找出拼写错误的词并进行校正.

2. 句子分析,对自然语言进行句子层面的分析,包括句法分析和其他句子级别的分析任务.

    2.1 组块分析:标出句子中的短语块,例如名词短句,动词短语等.

    2.2 超级标签标注,给每个句子中的每个词标注上超级标签,超级标签是句法树中与该词相关的树形结构.

    2.3 成分句法分析,分析句子的成分,给出一棵树由终结符和非终结符构成的句法树.

   2.4 语种分析,给定一段文本, 确定该文本属于哪个语种

   2.5 给没有明显句子边界的文本加边界.

3.语义分析:对给定文本进行分析和理解,形成能够表达语义的形式化表示或分布式表示

  3.1 词义消歧, 对有歧义的词,确定其准确的词义

 3.2 语义角色标注: 标注句子中的语义角色类标,语义角色,语义角色包括实施,受事,影响等.

4.顶层任务:直接面向普通用户,提供自然语言处理产品服务的系统级任务,会用到多个层面的自然语言处理技术

  4.1 机器翻译,通过计算机自动化把一种语言翻译成另外一种语言

  4.2 文本摘要: 对较长文本进行内容梗概的提取

  4.3 问答系统: 针对用户提出的问题,系统给出相应的答案.

 4.4 对话系统, 能够与用户进行聊天对话,从对话中捕获用户的意图,并分析执行

4.5 阅读理解,机器阅读完一篇文章后,给定一些文章相关问题,机器能够回答.

4.6 自动文章分级, 给定一篇文章,对文章的质量进行打分或分级.