Reasons for Exploring Deep Learning:
- 大部分人工设计的特征过于具体,不够完整,并且需要耗费大量的时间去设计和验证。
- 深度学习得到的特征适应性强,训练的快,可以不断学习,不断提高水平。
- 深度学习提供了丰富多样的框架去表示各种类型的信息。
- 可以应用于监督学习和无监督学习。
- 行之有效。
- 表现优于任何一种传统机器学习。
- 以惊人的速度在改进和提高。
第一个重要突破的领域是语音识别。
Why is NLP hard?
- 人类语言跟编程语言是模棱两可的,跟编程语言不同。
- 语言本身存在模糊性。
Deep NLP = Deep learning + NLP
深度学习和语言都是以词义为起点,这是一个非常核心的想法。