导论:走进自然语言处理
打卡课的链接: https://aistudio.baidu.com/aistudio/
目录
1. 什么是自然语言处理
"NLP是计算机科学领域与人工智能领域中的一个重要方向。它研究能实现人与计算机之间用自然语言进行有效通信的各种理论和方法。自然语言处理是一门融语言学、计算机科学、数学于一体的科学。"
2. 应用
* 智能问答:文本问答,表格问答,视频问答
* 智能对话
* 机器同传
3. 挑战
* 多样性
eg. 怎么抓蛐蛐/ 蟋蟀的捕捉方法
* 歧义性
eg. 什么颜色加什么颜色等于灰色/ 什么颜色加灰色等于什么颜色
关于“理解”的标准(图灵测试)
具体准则: 1. 对话(question answering) 2. 对话(dialogue) 3. 翻译(translation)
4. 自然语言发展
规则学习——统计学习方法——深度学习方法
统计学习方法:——特征工程
(形态,词法,句法,篇章)
深度学习:——