【KDD2024】面向课程图稀疏化的轻量级图神经网络搜索

6f50ffe1e894cba2232fd3bd8cf54eb9.png

来源:专知
本文为论文介绍,建议阅读5分钟
我们提出了一种结合课程图稀疏化和网络剪枝的轻量级图神经网络架构搜索(GASSIP)方法。

0d85bd0b9cf1371c08ee4c201bdc5265.png

图神经网络架构搜索(Graph Neural Architecture Search, GNAS)在各种图结构任务中取得了优异的性能。然而,现有的GNAS研究忽略了GNAS在资源受限场景中的应用。本文提出设计一种联合图数据和架构机制,通过有价值的图数据识别重要的子架构。为了搜索最优的轻量级图神经网络(Graph Neural Networks, GNNs),我们提出了一种结合课程图稀疏化和网络剪枝的轻量级图神经网络架构搜索(GASSIP)方法。具体来说,GASSIP包括一个操作剪枝的架构搜索模块,以实现高效的轻量级GNN搜索。同时,我们设计了一个新颖的课程图数据稀疏化模块,并结合架构感知的边删除难度测量来帮助选择最优的子架构。在两个可微掩码的帮助下,我们迭代优化这两个模块,以高效地搜索最优的轻量级架构。在五个基准上的广泛实验表明,GASSIP的有效性。特别是,我们的方法在节点分类性能方面达到相当甚至更高的水平,同时所搜索的GNN模型参数减半或更少,且图更加稀疏。

https://arxiv.org/abs/2406.16357

8e2632e7a1295fa03d7abdb73594b1b0.png

312d40b28ac01ddde1c4ce26e90f5e13.png

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值