论文分享 《Mitigating Hidden Confounding Effects for Causal Recommendation》

《Mitigating Hidden Confounding Effects for Causal Recommendation》

在推荐系统中存在着由混淆因素导致的虚假关联是因果推荐的主要问题聚焦点。过往介绍的文章主要针对的是混淆因素可以观察到的情况(少部分也谈到了不可观察的情况，但没有深追)，而本文主要是提出的在隐藏的混淆因素无法测量的情况下，如何去减轻隐藏混淆因素的影响。
大致的思路是设计了Hidden Confounder Removal(RCH)框架，利用前门调整将要计算的因果效应分为了两个可以识别和计算且与混淆因素独立的两部分。作者在电商产品推荐和微视频推荐两个实际场景中，基于MMGCN网络实例化了RCH框架，并在Tiktok、Kwai、TaoBao三个数据集上进行了实验论证。

因果图

$I：物品特征。$
$U：用户特征。$

$V：潜在的混淆因素。同时影响着物品特征和偏好事件的发生。$

$L：用户偏好的标识。发生在用户物品交互之后，比如点赞或者购买。$

$M:用户物品对U,I和偏好标识之间的中间变量集合。例如点击->添加购物车->购买。点击->完成观看->点赞。$

$V\to M$通常是有边的，但是作者在本文中不予考虑。

因果效应计算

最终目标是在不测量混淆因素的情况下，计算因果效应$P(l|u,do(i))$。本文中详细的公式推导细节都是参考这一本统计学领域的著作《Causal inference in
statistics: A primer》。

$$P(l,v,m|u,do(i))=P(m|u,do(i))P(v)P(l|m,v,u)\text{\hspace{1em}(1)}$$
因为L,V,M的条件独立性，公式(1)成立

$$\begin{array}{rl}P(l|u,do(i))& \stackrel{(a)}{=}\sum _{m}P(m|u,do(i))\sum _{v}P(v)P(l|m,v,u)\\ & \stackrel{(b)}{=}\sum _{m}P(m|u,do(i))P(l|u,do(m)).\end{array}\text{\hspace{1em}(2)}$$
公式(2b)是通过后门调整计算得来。$P(m|u,do(i))$是I对M的因果效应，$P(l|u,do(m))$是M对L的因果效应。
$P(m|u,do(i))$在后门路径$I\leftarrow V\to L\leftarrow M$中被变量L–D分离。因此$P(m|u,do(i))=P(m|u,i)$
$P(l|u,do(m))$可以在不测量V的情况下通过后面调整来阻断后门路径$M\leftarrow I\leftarrow V\to L$，推导公式如下：
$$\begin{array}{rl}\sum _{v}P(v)P(l|v,m,u)& \stackrel{(a)}{=}\sum _v\sum _{i}P(v|i)P(i)P(l|v,m,u)\\ & \stackrel{(b)}{=}\sum _i\sum _{v}P(v|i)P(i)P(l|m,v,u,i)\\ & \stackrel{(c)}{=}\sum _i\left(\sum _{v}P(l|m,v,u,i)P(v|i,m)\right)P(i)\\ & \stackrel{(d)}{=}\sum _{i}P(l|u,i,m)P(i)\end{array}\text{\hspace{1em}(3)}$$
公式(3a)成立条件:$P(v)={\sum }_{v}P(v|i)P(i)$

公式(3b)成立条件：在因果图中给定V,M后，I和L是独立的。$P(l|m,v,u)=P(l|m,v,u,i)$

公式(3c)成立条件：在因果图中给定I后，M和V是独立的。$P(v|i)=P(v|i,m)$

公式(3d)成立条件：边际分布的性质决定的。

所以最终I对L的因果效应计算公式如下，计算两个部分的条件概率
$$P(l|u,do(i))=\sum _{m}P(m|u,i)\sum _{i^{\prime }}P(l|i^{\prime },m)P(i^{\prime })\text{\hspace{1em}(4)}$$

HCR框架

训练阶段

$$P(m|u,i)=f_m\left(u,i\right)$$
由于M受到U的影响，因此：
$$P(l|i^{\prime },m)P(i^{\prime })=h(u,i,m)=h^1(u,m)\ast h^2(u,i)\text{\hspace{1em}(5)}$$

多任务学习：
$$\underset{f_m,h}{\min }\sum _{(u,i,m)\in \mathcal{D}}{R}_M\left(f_m\left(u,i\right),m\right)+\beta \sum _{(u,i,m,l)\in \mathcal{D}}{R}_L\left(h\left(u,i,m\right),l\right)\text{\hspace{1em}(6)}$$
所有的骨干模型共享嵌入层，以促进跨任务的知识传递。

推理阶段

根据公式4遍历M和I的计算成本很高，因此对$h(u,i,m)$进行了分解设计
$$\begin{array}{rl}P(l|u,do(i))& =\sum _{m}P(m|u,i)\sum _{i^{\prime }}P(l|i^{\prime },m)P(i^{\prime })\\ & =\sum _m{f}_m(u,i)\sum _{i^{\prime }}h(u,i^{\prime },m)P(i^{\prime })\\ & =\sum _m{f}_m(u,i)\sum _{i^{\prime }}{h}^1(u,m)h^2(u,i^{\prime })P(i^{\prime })\\ & \begin{array}{r}=\sum _m{f}_m(u,i)h^1(u,m)\ast \sum _{i^{\prime }}{h}^2(u,i^{\prime })P(i^{\prime })\end{array}\\ & \propto S_u\sum _m{f}_m(u,i)h^1(u,m)\end{array}\text{\hspace{1em}(7)}$$
其中$S_u={\sum }_{i^{\prime }}{h}^2(u,i^{\prime })$当u给定时是一个常量。由于其不会影响项目的排名，因此可以在推理过程中忽略。

实验

三个Research question：
RQ1 ：HCR与其他SOTA的推荐性能比较
RQ2 ：HCR的因果效应各部分的计算对整体性能的影响(消融实验)
RQ3 : 论证HCR的改进的先进性（主要针对时间、稳定和性能几个方面和别的模型做比较）

总结

公式繁多，本人理解不够透彻，大致只能够明白思路，从文章中可以看出作者做了许多的工作，无论是在理论上还是实验内容上的内容量都是十分丰富的。总体来说这篇文章难度十分的高（可能内容难度不大，但是需要理解原理）。