Weisfeiler-Lehman(WL)算法和WL Test的学习笔记

1. 什么是Weisfeiler-Lehman(WL)算法

一维的Weisfeiler-Lehman:
对于任意的节点 v i ∈ G v_i∈G viG

  • 获取节点{ v i {v_i} vi}所有的邻居节点 j j j的特征{ h v j h_{v_j} hvj}
  • 更新该节点的特征 h i < − h a s h ∑ j h v j h_i < -hash{\sum_{j}h_{v_j}} hi<hashjhvj,hash是一个单射函数( x x x不同则 f ( x ) f(x) f(x)一定不同)

重复以上步骤 K K K次直至收敛

2. WL Test

事实上,Weisfeiler-Lehman算法在大多数图上会得到一个独一无二的特征集合,这意味着图上的每一个节点都有着独一无二的角色定位(例外在于网格,链式结构等等)。因此,对于大多数非规则的图结构,得到的特征可以作为图是否同构的判别依据,也就是WL Test(例如两个图是否是同质的,取决于节点的排列方式)。

3. Weisfeiler-Lehman算法与GCN的关系

有的论文认为,GCN模型可以看作图上Weisfeiler-Lehman算法的一种变形
我们回到公式
h v i l + 1 = σ ( ∑ j 1 c i j h v j l W l ) h_{v_i}^{l+1}=\sigma(\sum_{j}\frac{1}{c_{ij}}h_{v_j}^lW^l) hvil+1=σ(jcij1hvjlWl)
其中, c i j = d i d j c_{ij}=\sqrt{d_id_j} cij=didj j ∈ N i j∈N_i jNi N i N_i Ni i i i的邻居节点, d i d_i di, d j d_j dj i i i, j j j的度,这本质上是在模型中使用了对称规范化后的邻接矩阵 D 1 2 A D 1 2 D^{\frac{1}{2}}AD^{\frac{1}{2}} D21AD21,可以看出这个传播规则其实是加了参数 W l W^l Wl后略微变化的hash函数。如果我们采用合适的非线性函数 σ \sigma σ然后随机初始化参数矩阵那么这个矩阵就会是正交的,这个更新策略就会非常可靠。这样子我们就可以通过局部图结构中的距离得到非常有意义的平滑嵌入表示。这也就是很多文章将GCN视作Weisfeiler-Lehman变形的理由。

4. Weisfeiler-Lehman算法应用

Weisfeiler-Lehman算法通常被用在解决图的相似性问题上,虽然算法要解决的问题聚焦在Graph层面上,但是其立足点还是在节点上,如果我们能够找到一种衡量节点独立性(unique)的方法,那么我们就可以将图视作一个包含这些独立性节点的集合,两张图的相似性可以转化为两个集合的Jaccard相似度。

5. 举例说明Wisfeiler-Lehman算法应用

给定两图G和G’,其中每个节点都已经打上了标签(实际应用中,有些时候我们并拿不到节点的标签,这时可以对节点都标上“1”这个标签)

在这里插入图片描述
要比较G和G’的相似性,我们来看看weisfeiler-lehman算法是怎么做的:

①聚合邻居节点的标签得到一个标签的字符串,对字符串进行升序排列。

在这里插入图片描述
②对字符串进行哈希处理,这里生成了一个一一映射的字典,这一步也可以使用其它的字符串哈希函数,只要保证碰撞率尽量小就可以。
在这里插入图片描述
③将哈希过的值重新赋值给相应的节点
在这里插入图片描述
这样第一轮迭代之后,G={6、6、8、10、11、13},G’={6,7,9,10,12,13}于是利用Jaccard公式就可以计算出G和G`的相似度了,如果需要更严格的对比,可以持续迭代上述过程。

  • 1
    点赞
  • 9
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

来包番茄沙司

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值