LSTM模型

LSTM模型是为了解决RNN神经网络中的梯度爆炸问题。

（1）模型思路：

RNN是想把所有信息都记住，不管是有用的信息还是没用的信息。LSTM：设计一个记忆细胞（具备选择性记忆的功能），可以选择记忆重要信息，过滤掉噪声信息，减轻记忆负担。

（2）LSTM前向传播：

LSTM模型：

RNN模型：

两者相比，LSTM内部更加复杂，且RNN只有一条链路串联起各个神经元，而LSTM是由两条链路串联起来的。

 LSTM内部结构分析：