【因果推断与机器学习】带入坑——之辛普森悖论

@[因果推断与机器学习](Why you might Care )

Simpson’s Paradox

考虑一个纯粹假设的未来,那里有一种被称为COVID-27的新疾病在人类中普遍存在。在这个纯粹假设的未来中,已经开发了两种治疗方法: 治疗A和治疗B。治疗B比治疗A价格更贵,因此当前接受治疗A与治疗B的那些人的划分大致为73%/27%。在一个只关心尽量减少生命损失的国家,你负责选择你的国家将专门使用哪种治疗方法。

你有死于 COVID-27 的人的百分比数据,考虑到他们被分配的治疗,以及他们在决定治疗时的状况。他们的病情是一个二元变量:轻度或重度。在该数据中,接受 A 的人中有 16% 死亡,而接受 B 的人中有 19% 死亡。但是,当我们将病情较轻的人与病情严重的人分开检查时,数字的顺序相反。在轻度亚群中,接受 A 的人中有 15% 死亡,而接受 B 的人中有 10% 死亡。在重症亚群中,接受 A 的人中有 30% 死亡,而接受 B 的人中有 20% 死亡。我们在表 1.1 中描述了这些百分比和相应的计数。

TreatmentMildSevereTotal
A15%
(210/1400)
30%
(30/100)
16%
(2240/1500)
B10%
(5/50)
20%
(100/500)
19%
(105/550)

表1.1: COVID-27数据中的辛普森悖论百分比表示每组的死亡率。越低越好。括号中的数字是相应的计数。这种明显的悖论源于这样的解释,即在检查整个人群时,治疗A看起来更好,但是在所有亚群中,治疗B看起来更好。

明显的悖论源于这样一个事实,在表 1.1 中,“Total”列可以解释为我们应该更喜欢治疗 A,而“轻度”和“严重”列都可以解释为我们应该更喜欢治疗治疗B.1 事实上,答案是,如果我们知道某人的病情,我们应该给他治疗B,如果我们不知道他的病情,我们应该给他治疗A。开个玩笑……那不任何意义。所以说真的,你应该为你的国家选择什么样的治疗方法?
根据数据的因果结构,治疗A或治疗B可能是正确的答案。换句话说,因果关系对于解决辛普森悖论至关重要。现在,我们只给出什么时候你应该更喜欢治疗A和什么时候你应该更喜欢治疗B的直觉。

(找到辛普森悖论的一个关键因素是人员分配给群体的不均匀性。接受治疗A的1500人中有1400患有轻度疾病,而接受治疗B的550人中有500患有严重疾病。由于病情较轻的人死亡的可能性较小,这意味着接受A治疗的人的总死亡率低于轻度和重度疾病在他们之间平均分配的情况。相反的偏差对于治疗B是正确的。)

情景一
在这里插入图片描述
如果身体健康条件 C 是治疗 T 的原因(图 1.1),治疗 B 在降低死亡率 Y 方面更有效。例如,医生决定对大多数病情较轻的人使用治疗方式A进行治疗。而且他们省去了更贵的治疗方式B对于那些重症患者。因为病情严重会导致一个人更有可能死亡(图 1.1 中的 C->Y)并导致一个人更有可能接受治疗 B(图 1.1 中的 C ->T ),这会导致治疗方式B被更容易的和高死亡率联系起来。换句话说,治疗 B 与较高的死亡率相关,仅仅是因为“身体健康情况”是“治疗方式”和“死亡率”的共同原因。在这里,“身体健康状态”混淆了“治疗方式”和“死亡率”,为了纠正这种混杂因素,我们必须检查具有相同条件的患者之间的 T 和 Y 的关系。这意味着更好的治疗方式是在每个亚群中产生较低死亡率的治疗方法(表 1.1 中的“轻度”和“重度”列):也就是 治疗 B。

在这里插入图片描述

情景2: 如果治疗T的处方是身体健康状态C的原因,治疗A更有效。一个示例场景是,治疗B非常稀缺,需要患者在接受治疗之前在接受治疗前等待很长时间。治疗A不存在这个问题。由于一名新冠肺炎患者的病情随着时间的推移而恶化,治疗B的处方实际上导致病情较轻的患者发展为病情严重的患者,导致更高的死亡率。因此,即使治疗B比治疗A更有效(沿T→γ) ,但是治疗B的治疗方式导致更坏的身体健康条件(沿T的负面影响→C→γ) 总的来说,治疗B的效果较差。注:由于治疗B更昂贵,治疗B以0.27概率开具处方,而治疗A以0.73概率开具处方;重要的是,在这种情况下,治疗处方与病情无关。

总而言之,更有效的处理完全取决于问题的因果结构。在方案1中,其中 C C C T T T 的原因 (图1.1),治疗B更有效。在方案2中,其中 T T T C C C 的原因 (图1.2),治疗A更有效。没有因果关系,辛普森悖论就无法解决。有了因果关系,它根本不是一个悖论。

【干货书】《因果推理导论-机器学习角度》,132页pdf 有几个主要的主题贯穿全书。这些主题主要是对两个不同类别的比较。当你阅读的时候,很重要的一点是你要明白书的不同部分适合什么类别,不适合什么类别。 统计因果。即使有无限多的数据,我们有时也无法计算一些因果量。相比之下,很多统计是关于在有限样本中解决不确定性的。当给定无限数据时,没有不确定性。然而,关联,一个统计概念,不是因果关系。在因果推理方面还有更多的工作要做,即使在开始使用无限数据之后也是如此。这是激发因果推理的主要区别。我们在这一章已经做了这样的区分,并将在整本书中继续做这样的区分。 识别评估。因果效应的识别是因果推论所独有的。这是一个有待解决的问题,即使我们有无限的数据。然而,因果推理也传统统计和机器学习共享估计。我们将主要从识别因果效应(在第2章中,4和6)之前估计因果效应(第7章)。例外是2.5节和节4.6.2,我们进行完整的例子估计给你的整个过程是什么样子。 介入观察。如果我们能进行干预/实验,因果效应的识别就相对容易了。这很简单,因为我们可以采取我们想要衡量因果效应的行动,并简单地衡量我们采取行动后的效果。观测数据变得更加复杂,因为数据中几乎总是引入混杂。 假设。将会有一个很大的焦点是我们用什么假设来得到我们得到的结果。每个假设都有自己的框来帮助人们注意到它。清晰的假设应该使我们很容易看到对给定的因果分析或因果模型的批评。他们希望,清晰地提出假设将导致对因果关系的更清晰的讨论。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值