TensorFlow入门教程(九):LSTM网络结构简介

LSTM网络适用于存在时间序列关联的数据处理,如语音识别和文字识别。它引入了输入门、输出门和忘记门来控制信息流动。输入门决定新信息是否进入,忘记门控制旧信息的遗忘,输出门决定最终输出。每个门的计算涉及权重和偏置,通过这些门的开关控制信号流动,实现长期依赖的保留。LSTM的网络结构包括输入、隐藏和输出层,通过调整门的状态控制信息传递。
摘要由CSDN通过智能技术生成

对于之间的神经网络,各个输入信号之间没有联系,但对于现实中的一些场景,如语音处理,文字识别等,输入之间均有一点的联系,根据此应用场景,产生了LSTM(Long Short Term Memory)网络。

与BP神经网络相似,LSTM网络多了一个反馈,即将上一个时间的输出作为了下一个时间的输入,基本结构如下:

LSTM主要由输入门,输出门,忘记门控制。下图所示为其一个隐藏的结构,最下面g为输入信号,Input Gate为输入门,两个数值做乘法,即可对输入信号进行判断,让其进不进入后面的内容。Forget Gate为忘记门,使信号发生一定的衰减,Output Gate为输出门,控制输出信号。

其隐藏层计算如下:

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值