语音和文字处理 —— 自然语言处理 NLP
自然语言处理目前是限制AI发展中众多限制条件里的“关键条件”,一旦这一“关键条件”突破,人类就能真真切切的感受到AI的智能化,同时人机的交互方式也将改写。
所以除了计算机视觉之外,对语言这块最好也要有一定的认知。
概念
是理解和处理文字的过程,相当于人的大脑。
流程
理解:
- 文本/语义理解 NLU。
处理: - 对话状态维护 DST;
- 动作候选排序 POLICY。
应用: - 语言生成 NLG。
瓶颈
自然语言处理的“发展趋势”是能理解目标说的话的意义。以下的“限制条件”构成了瓶颈,相对于计算机视觉来说,自然语言处理距离突破“限制条件”似乎更为接近了。
语言本身的难度限制:
- 语言歧义性;
- 语言多样性;
- 语言多变性;
- 语境复杂性。
数据质量限制:
- 错字;
- 多字/少字