论文笔记:Max-Margin DeepWalk: Discriminative Learning of Network Representation

Max-Margin DeepWalk: Discriminative Learning of Network Representation

继承了Network Representation Learning with Rich Text Information论文。
在Network Representation Learning with Rich Text Information文中,DW可以被看成矩阵分解:M=WH
其中M是log下面的式子:在这里插入图片描述
W是顶点向量排列成的矩阵,H是上下文顶点向量排列成的矩阵。
因此对于DW形成的矩阵分解的的目标就是逼近M和WH,因此目标方程可以写成:在这里插入图片描述

在本文中,作者认为,由于许多网络中的节点都会有标签,比如维基百科连接的网络,顶点可能被标签成物理,天文,人物等等,因此可以充分的利用这些信息。而在纯DW中,并没有考虑这种标签信息。
因此可以在DW的基础上加入SVM,其实我们按照深度学习网络的状态可以想象成最后一层再加入SVM网络,使得不同类别的顶点向量区分的更大。
在本论文中,作者使用矩阵分解来表现DW+SVM:
在这里插入图片描述
其中:LDW项是:在这里插入图片描述
也就是最小化DW相当于的矩阵分解目标。后面的项是SVM典型的公式。
论文还给出了如何优化w和e,X和Y。

  • 1
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值