weixin_43870856的博客

原创 lstm和rnn、gru

RNN 循环神经网络，是非线性动态系统，将序列映射到序列，主要参数有五个：[Whv,Whh,Woh,bh,bo,h0]，典型的结构图如下： 和普通神经网络一样，RNN有输入层输出层和隐含层，不一样的是RNN在不同的时间t会有不同的状态，其中t-1时刻隐含层的输出会作用到t时刻的隐含层. 参数意义是: Whv:输入层到隐含层的权重参数，Whh:隐含层到隐含层的权重参数，Woh：隐含层到输出层的权重...