26、RNN(循环神经网络)

一、RNN循环神经网络

https://zybuluo.com/hanbingtao/note/541458

• 公式的计算过程：

  

  image.png

二、LSTM

• LSTM----也是一种RNN
• 

  普通的RNN.png

• LSTM--长短期记忆神经网络

  

  LSTM.png
• 两者不一样的地方，LSTM右上角加上上来c的t次方。
• 如果是DNN使用Dense构建神经网络。
• 如果是CNN,使用conv2d构建神经网络。
• 如果是RNN，使用Simple构建神经网络。
• 双向循环神经网络

image.png

• 双向循环的神经网络用的都是LSTM