神经控制微分方程

本文探讨了受微分方程启发的深度学习方法,特别是神经控制微分方程(NCDEs)的改进。通过编码器-解码器结构和潜在路径生成,NCDEs在处理不规则时间序列时表现出优于RNNs的精度,并实现插值和外推功能。实验证明,这种强化的NCDE在机器学习任务中具有显著性能优势。
摘要由CSDN通过智能技术生成

受微分方程启发的深度学习是最近的研究趋势,它标志着许多机器学习任务的艺术表现状态。其中,利用神经控制微分方程(NCDEs)建立时间序列模型是一种突破。在许多情况下,基于ncde的模型不仅比递归神经网络(RNNs)提供了更好的精度,而且使处理不规则时间序列成为可能。在这项工作中,我们通过重新设计其核心部分,即从离散的时间序列输入生成连续路径,来增强NCDEs。NCDEs通常使用插值算法将离散的时间序列样本转换为连续的路径。然而,我们建议i)使用编码器-解码器架构生成另一个潜在的连续路径,这对应于NCDEs的插补过程,即我们基于神经网络的插补与现有的显式插补,ii)利用解码器的生成特性,即:如有需要,可超越原始数据的时间域外推。因此,我们的NCDE设计可以在下游机器学习任务中同时使用插值和外推信息。在我们对5个真实数据集和12个基线的实验中,我们基于外推和内插的ncde比现有基线的性能要好得多

  • 1
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值