pyGAT源码阅读

最新推荐文章于 2024-08-08 08:11:33 发布
最新推荐文章于 2024-08-08 08:11:33 发布
阅读量497 收藏 1
点赞数
分类专栏： GNN
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/TQCAI666/article/details/110095251
版权
本文通过阅读pyGAT源码，详细解释了如何计算节点之间的相似度，通过操作去除不联通边，并应用注意力机制，形成一个包含8个头部的注意力网络。经过多次聚合操作和输出层的处理，提升模型性能，尤其是在测试集上对比GCN有显著提升。
摘要由CSDN通过智能技术生成

layers.GraphAttentionLayer._prepare_attentional_mechanism_input

Wh.shape
Out[1]: torch.Size([2708, 8])
Wh_repeated_in_chunks.shape
Out[3]: torch.Size([7333264, 8])
N
Out[4]: 2708
N**2
Out[5]: 7333264

Wh_repeated_in_chunks.shape == Wh_repeated_alternating.shape == (N * N, out_features)

目的其实是把两个拼起来

        # e1 || e1
        # e1 || e2
        # e1 || e3
        # ...
        # e1 || eN
        # e2 || e1
        # e2 || e2
        # e2 || e3
        # ...
        # e2 || eN
        # ...
        # eN || e1
        # eN || e2
        # eN || e3
        # ...
        # eN || eN

all_combinations_matrix = torch.cat([Wh_repeated_in_chunks, Wh_repeated_alternating], dim
最低0.47元/天 解锁文章
数学工具构造器
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
专栏目录
【图像拼接（Image Stitching）】关于【图像拼接论文源码精读】专栏的相关说明，包含专栏内文章结构说明、源码阅读顺序、培养代码能力、如何创新等。总之，【图像拼接源码】复现看这一篇就够了！
畅游计算机视觉的海洋
01-01 2万+
本文是【图像拼接论文源码精读】专栏的相关说明，将一些共性的东西在这里做统一说明，就不在每一篇文章中重复了。【图像拼接（Image Stitching）】关于【图像拼接论文精读】专栏的相关说明，包含专栏使用说明、创新思路分享等（不定期更新）。先看该专栏说明，然后进入专栏阅读相关文章，建议同步订阅，同步阅读。本专栏针对图像拼接领域公布源码的文章进行源码解读，没有源码的文章在有源码的文章全部更新完毕后尝试复现。
Spring Boot源码——源码阅读环境搭建
等一杯咖啡的博客
04-21 1万+
前言 阅读Spring Boot源码，需要先有所了解Spring Framework相关知识或者源码细节等，可以参考我之前的相关博客内容。接下来，主要着手研究Spring Boot这一块，如果还不知道怎么用Spring Boot，建立花费一些时间入门一下。 本文主要是阅读源码的第一步，搭建阅读Spring Boot源码的环境，我们依然使用的是IDEA工具。 环境准备 JDK8+ Maven3.5...
PyGAT:GAT python版本
06-14
PyGAT GAT python版本 1 PyGAT的整体设计思想与java版基本一致，可以参考java版文档 2 使用流程也基本与java版本一致。python版本使用默认的配置文件即可，不用修改。 3 Python版本做接口测试，不提供excel功能，仅支持xml形式 4 Python版本中发送请求请使用httplib或者其他第三方库。（httplib已经足够简单，框架不再重复封装） 5 开发目录请保持固定。 6 Python版本仅提供接口自动化功能，WebUI自动化功能暂不支持，但以保留后续开发的接口。 7 有问题请参见www.gateside.cn或者加群 51302519
GAT论文阅读笔记-源码解读
xueliang
01-07 625
图注意力网络 论文：GRAPH ATTENTION NETWORKS. ICLR 2018
PyGAT 开源项目教程
gitblog_00032的博客
08-08 496
PyGAT 开源项目教程 pyGATPytorch implementation of the Graph Attention Network model by Veličković et. al (2017, https://arxiv.org/abs/1710.10903)项目地址:https://gitcode.com/gh_mirrors/py/pyGAT 项目介绍 PyGAT 是一个基...
GAT源码剖析
行走天涯的豆沙包的博客
01-06 1932
题解： 首先挂出核心公式和训练过程生成的aij注意系数 layer.py import numpy as np import torch import torch.nn as nn import torch.nn.functional as F class GraphAttentionLayer(nn.Module): """ Simple GAT layer, similar to https://arxiv.org/abs/1710.10903 """ def __
图注意力网络pyGAT论文代码注解
qq_44015059的博客
05-07 2237
论文地址：https://arxiv.org/abs/1710.10903 代码地址：https://github.com/Diego999/pyGAT 由于都使用引文网络cora，大部分的工作类似，在这里没有对代码进行详细注解 关于数据加载，矩阵正则化，one-hot编码转换部分可以参考 https://blog.csdn.net/qq_44015059/article/details/1059...
PyG-GAT+Mini理解与实现
图挖掘领域，新晋砖家 ☞ 未来可期，欢迎和静静一起学习交流吖
03-01 731
目录 零、简介 一、GAT讲解 学习资源 动机 创新 图数据结构的两种“特征” GAT的两种运算方式（masked只针对一阶邻居） 公式 论文原文 分析 与GCN的联系与区别 为什么GAT适用于有向图？ 为什么GAT适用于inductive任务？ 源码实现核心理解 模型 GAL层 二、GAT的PyG内置实现 三、自定义GAT层实现 单层注意力 多层注意力 通用版 零、简介 本人前一段学习的GCN看的差不多了，现在准备看GAT，于是开始搜集相关资料学习。其中本论.
Android aosp源码阅读
Notzuonotdied的博客
12-16 3734
前言 最近因为找工作，需要频繁查阅Android源码。因此，打算在本地硬盘上下载Android源码，通过Android Studio来阅读。 Android 源码构建：https://source.android.com/setup【建议直接阅读该文档】 操作流程 配置硬盘 由于我使用的是MacOS，所以仅提供MacOS的配置流程。 打开Disk Utility File -> New Image -> Blank Image 按照下图配置一块200G，区分大小写的磁盘分区。 一定要区分
MINIGUI的GAL层的项目修改源代码
04-17
这个源代码是华为海思的方案H3560里面的源代码！经过移植是成功的机顶盒上面跑起来的！是华为海思提过的！也是飞漫公司给华为移植的源代码！有需要的朋友可以值得一看！对MINIGUI这块感兴趣的朋友也可以看看！很有价值！
java源码包---java 源码 大量 实例
04-18
Applet钢琴模拟程序java源码 2个目标文件，提供基本的音乐编辑功能。编辑音乐软件的朋友，这款实例会对你有所帮助。 Calendar万年历 1个目标文件 EJB 模拟银行ATM流程及操作源代码 6个目标文件，EJB来模拟银行ATM...
PyGAT 项目使用教程
最新发布
gitblog_00126的博客
08-08 416
PyGAT 项目使用教程 pyGATPytorch implementation of the Graph Attention Network model by Veličković et. al (2017, https://arxiv.org/abs/1710.10903)项目地址:https://gitcode.com/gh_mirrors/py/pyGAT 目录结构及介绍 PyGAT 项...
GAT源码维度变换详解
m0_50611867的博客
01-29 1307
以下仅个人理解，请多多指正。 代码地址： https://github.com/Diego999/pyGAT models.py（部分） class GAT(nn.Module): def __init__(self, nfeat, nhid, nclass, dropout, alpha, nheads): super(GAT, self).__init__() self.dropout = dropout self.attentions = [
2021SC@SDUSC软件工程应用与实践10----GAT基础与药物蛋白结合方式创新
m0_55985367的博客
12-09 621
2021SC@SDUSC
图注意力网络(GAT) ICLR2018, Graph Attention Network论文详解
热门推荐
祥瑞的技术博客
04-21 10万+
背景：ICLR2018 论文，Graph Attention Network在GNN中非常重要，再之前图卷积网络GCN的基础之上引入了注意力机制，非常实用。 论文地址：https://arxiv.org/abs/1710.10903 代码地址： https://github.com/Diego999/pyGAT 相关论文详解： GCN (Graph Convolutional Networ...
Lua源码阅读指南：从外围到核心
"本文介绍了阅读Lua源代码的相关方法和顺序，旨在帮助读者理解并欣赏Lua的源码设计。文章提到了Lua的源代码结构清晰，易于阅读，尽管篇幅不大，但对于初学者来说仍有一定挑战。作者建议按照一定的顺序来阅读源代码，...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值