【模型复现 】基于RNN优化的并行计算模型-SRU的快速复现「极链AI云 」
文章目录
一、模型详情
1.1 模型简介:
RNN模型在机器翻译,语言模型,问答系统中取得了非凡的成就,由于RNN的结构,当前的层输入为前一层的输出,所有RNN比较适合时间序列问题,但也正是由于这种串行结构,限制了RNN模型的训练速度,与CNN相比,RNN并不能进行并行化处理。而SRU网络结构的提出就是为了解决这个问题,SRU(simple recurrent units)将大部分运算放到进行并行处理,只是将有具有小量运算的步骤进行串行。
1.2 关键词:
并行运算
1.3 应用场景:
图像分类
1.4 结构:
1.5 论文地址:
https://arxiv.org/pdf/1709.02755.pdf