一、文章主要创新点
1.将乘法变成卷积
用convolution ALSTM(卷积注意力网络)代替传统的ALSTM(注意力网络),说白了就是把LSTM和soft attention模型中所有的乘法都变成卷积,LSTM网络的输入不再是一个向量,而是一个二维的数组,这样可以保存feature map在空间上的关系。
LSTM内部各个门的更新方程,乘法全部变成卷积
注意力模型,也变成卷积
用convolution ALSTM(卷积注意力网络)代替传统的ALSTM(注意力网络),说白了就是把LSTM和soft attention模型中所有的乘法都变成卷积,LSTM网络的输入不再是一个向量,而是一个二维的数组,这样可以保存feature map在空间上的关系。
LSTM内部各个门的更新方程,乘法全部变成卷积
注意力模型,也变成卷积