文章目录
这是百度飞桨第三次NLP直播课程的记录。课程地址: https://aistudio.baidu.com/aistudio/education/group/info/888
句子分类(情感分析)和语义匹配
一、什么是情感分析
二、实现句子分类
1、句子的向量表示
2、处理长句子
(1)截断
(2)填充
3、处理句子语义信息
三、循环神经网络(RNN)
四、长短时记忆网络LSTM
C
t
C_t
Ct为累积记忆,输出门其实是
O
t
O_t
Ot,这里写错了;
X
t
X_t
Xt是此时输入的embedding,
h
t
−
1
h_{t-1}
ht−1是上一步返回的重点。
首先经过遗忘门,如果输入信息很重要,就需要遗忘一些累积记忆。然后是输入门,表示新的内容要记住多少(权重);然后是划重点,得到
h
t
h_t
ht。