LSTM的学习

---

前言

长短期记忆（LSTM）是一种非常重要的神经网络技术，其在语音识别和自然语言处理等许多领域都得到了广泛的应用。

---

一、LSTM概述

长短期记忆网络（LSTM，Long Short-Term Memory）是一种时间循环神经网络，是为了解决一般的RNN（循环神经网络）存在的长期依赖问题而专门设计出来的，所有的RNN都具有一种重复神经网络模块的链式形式。

LSTM和RNN的区别：
RNN是想把有用、没用的都记住；
LSTM则是设计一个记忆细胞，具有选择性记忆功能，可以选择记忆重要的信息，过滤掉噪声信息，减轻噪声负担。
比如：期末复习

二、LSTM的结构

1.结构

对每个部分的计算

W为权重，b为偏置

2.LSTM反向传播

总结

这里对LSTM原理进行的学习。