[2022]李宏毅深度学习与机器学习第四讲(选修)-GNN

[2022]李宏毅深度学习与机器学习第四讲(选修)-GNN

做笔记的目的

1、监督自己把50多个小时的视频看下去,所以每看一部分内容做一下笔记,我认为这是比较有意义的一件事情。
2、路漫漫其修远兮,学习是不断重复和积累的过程。怕自己看完视频不及时做笔记,学习效果不好,因此想着做笔记,提高学习效果。
3、因为刚刚入门深度学习,听课的过程中,理解难免有偏差,也希望各位大佬指正。

GNN

其实有些地方没听懂
数据可能以图得形式出现,这样节点间会存在某种特定关系,同时dataset会非常大,所以我们需要GNN。
在这里插入图片描述
GNN需要做两步,第一个是卷积(聚合),以及readout,有很多种方法。
在这里插入图片描述

NN4G

在这里插入图片描述
在这里插入图片描述
把相邻的节点相加,然后乘W,在与自身相加乘W,这样不断地更新。
在这里插入图片描述
readout这一步,就是求每个图的平均各乘W,之后相加。

DCNN

在这里插入图片描述
在这里插入图片描述
他的方法是求距离等于1的节点然后求平均之后再乘权重;求距离等于2的节点然后求平均之后再乘权重,这样反复执行完求距离等于K的。之后对矩阵进行一个transform。

MoNET

因为边的权重不一样,比如说每个节点的距离,计算方法如下图:
在这里插入图片描述

GTA

边的权重学习出来。
在这里插入图片描述
对邻居做attention,两个向量算出attention 分数然后相乘相加
在这里插入图片描述

GIN

直接记住结论:图卷积要加上自己,同时邻居用相加,因为相加的话能表示的关系更多。
在这里插入图片描述

  • 0
    点赞
  • 4
    收藏
    觉得还不错? 一键收藏
  • 4
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 4
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值