落尘

原创 论文阅读笔记《Memory In Memory: A Predictive Neural Network...》

0 摘要与介绍 时空序列预测任务定义 作者认为自然界中的时空序列预测问题很多都是高度非平稳(highly non-stationary) 的随机过程(即随机过程的统计特性随时间的推移而变化)，不过根据Cramer的分解公式，任一非平稳的随机过程可以被分解为确定的，时变的多项式加上一个均值为0的随机项(看看这里)。通过应用不同的适当的操作，作者认为可以将时变的多项式转化为一个常量，使得确定性的部分具有可预测性。 要解决的问题 作者认为以前的LSTM魔改网络(如PredRNN)缺少对非平稳信息的建模让网络很难有