从零开始的深度学习笔记（五）RNN网络详解

前言

循环神经网络RNN（Recurrent Neural Network）灵感来自于人类的记忆功能，那么如果让神经网络具备“记忆功能”效果会是怎么样呢？

至少对于人类来说，没有记忆功能是无法想象的。CNN缺少了记忆功能让人感到遗憾，但是我们已经见识到了CNN再图像领域大有可为，现在让我们一起来看看具有了记忆功能的RNN循环神经网络到底能给我们带来什么惊喜吧。

初识循环神经网络

循环神经网络，我们一般简称RNN，是一种具备了‘记忆’功能的网络，不妨让我们思考一下什么叫做【记忆】？比如说，我们想起来一件事儿，【两年前村口王二狗半夜翻墙上网摔断腿】。那么这件事情我们可以看成这么一个流程。