初探图神经网络

  • 输入

    • 每一条文本由n个维度的embedding表征

    • 文本之间存在一定关联,用邻接矩阵adj表示,其为0-1矩阵,0代表两条文本无关联,1代表两条文本有关联

  • 输出

    • 正常的分类 or 回归

  • 计算逻辑

    • K为网络层数,A为邻接矩阵,W为更新权重,σ为激活函数

      • 乘法:W对应矩阵相乘变换,

      • 加法:A是0-1矩阵,0代表两条文本无关联,1代表两条文本有关联,每个节点(文本)的特征加和通过邻接矩阵进行操作。下图的Z3 = 特征加和(X1, X2, X3, X4)

      • 非线性:σ对应激活函数,添加非线性

    • 确定好输入输出层,构建好文本 or 序列的embedding表示以及邻接矩阵adj,喂入模型训练,训练过程与其他网络无异,就是在不断更新网络的权值。

        

    总结:GCN比CNN多了一邻接矩阵A,A用来表征数据之间的关联,相当于给模型提供了数据之间的关系信息,其余方面与正常的CNN神经网络训练并无差别,就是一个梯度下降的过程。

  • 2
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值