循环神经网络系列RNN、LSTM及变种
摘要
循环神经网络(Recurrent Neural Network, RNN)是一类以序列(sequence)数据为输入,在序列的演进方向进行递归(recursion)且所有节点(循环单元)按链式连接的递归神经网络(recursive neural network)。
人脑记忆原理:
对信息的预测和记忆功能
语言模型对当前输入信息的先后顺序
人脑的存储方式
人脑的记忆算法功能
序列
自然语言处理问题。x1可以看做是第一个单词,x2可以看做是第二个单词,依次类推。
语音处理。此时,每个元素是每帧的声音
原创
2020-06-22 14:44:22 ·
2368 阅读 ·
1 评论