因果效应与统计相关

一句话定位:系统区分因果效应(causal effect)与统计相关(statistical association),阐明辛普森悖论等经典案例,解释为什么两者不可混淆。

前置依赖:


核心思想

统计相关描述的是变量之间的数学关系,因果效应描述的是一个变量变化导致另一个变量变化的机制。两者在很多情况下方向一致,但在有混杂(confounding)或样本选择偏差(selection bias)时会分道扬镳。混淆它们的代价可能是错误的政策决策、错误的经济学结论,甚至是有害的医疗建议。


一、基本定义

1.1 统计相关

协方差

相关系数(标准化协方差):

条件相关(在给定 时):

这些都是纯统计量,只需要数据,不需要任何因果假设。

1.2 因果效应

因果效应描述的是 变化导致 变化的程度。在潜在结果框架下:

个体因果效应(ITE)

平均因果效应(ATE)

条件平均因果效应(CATE)

这些量的定义不涉及如何从数据估计——那是第二个问题。


二、为什么统计相关不等于因果效应

2.1 混杂(Confounding)

混杂是最常见的混淆来源。

定义:变量 的混杂因素,当且仅当 同时影响 ,且不在 的因果路径上。

图形化表示:

Z → X
↓   ↓
Y ←

此时:

  • 统计相关 会包含 两条路径的贡献
  • 因果效应只应包含 这一条路径

数学上:

两者分母不同: vs 。当 同时影响 时,这个差异就是混杂造成的偏差。

2.2 辛普森悖论(Simpson’s Paradox)

辛普森悖论是混杂导致统计相关与因果效应方向相反的最著名案例。

数据汇总(总览):

治疗组康复率
接受治疗(78/130 = 60%
未接受治疗(87/130 = 67%

如果不看任何混杂因素,接受治疗组的康复率(60%)低于未接受组(67%)——治疗看起来有害。

分 组(按病情严重程度 分组):

病情 治疗组康复率未治疗组康复率
轻症(81/87 = 93%234/270 = 87%
重症(57/63 = 90%55/80 = 69%

分 组后,治疗在两个组内都显示有益(93% > 87%,90% > 69%)!

解释:病情 是混杂因素。重症患者更倾向于接受治疗(重症组中治疗比例 63/143 ≈ 44%,轻症组 87/357 ≈ 24%)。因此总数据中治疗组包含更多重症患者,拉低了平均康复率。正确的因果效应是 ,而不是 的负值。

形式化推导:定义总体 ATE

如果各层的因果效应 与总体的 符号相反,就出现辛普森悖论。关键条件是治疗与混杂 相关(患者选择接受治疗受病情影响),即 在不同 下不同。

2.3 方向性混淆

另一个典型场景: 的因果效应为正,但存在负的混杂。

假设:

  • 增加
  • 同时影响
  • 负相关,与 负相关

此时 可能为负,尽管因果效应为正。原因是混杂路径 产生的负相关”压过”了直接因果路径


三、介入实验与观测研究的区别

3.1 随机对照试验(RCT)

如果我们将 随机分配(如抛硬币决定是否给药),则:

此时:

即观测数据和实验数据等同,因为随机化切断了 的所有父边。

3.2 观测研究

在没有随机化的情况下,我们需要通过假设来识别因果效应。主要方法:

  1. 后门准则调整:找到最小充分协变量集 ,通过分层或回归控制混杂
  2. 前门准则调整:存在中介 时,通过 路径识别
  3. 工具变量(IV):利用与 相关但只通过 影响 的变量

四、选择性偏差(Selection Bias)

选择性偏差是另一类混淆,源于样本选择过程。

场景:一个大学只录取 SAT 分数前 10% 的学生, = 是否上大学, = 毕业后收入。如果直接比较上过大学和没上过大学的人的收入,会出现偏差——因为 SAT 分数同时影响是否上大学和未来收入。

因为被比较的两组人在入学前就已经不同(选择效应)。

形式化:设 表示被选入样本。选择偏差出现在 不成立的情况,即样本选择与未观测混杂相关。


五、关键不等式与关系

5.1 因果分解

在任何 DAG 中,观测分布可以分解为:

但干预分布 涉及修改某些条件分布。

5.2 混杂偏差的大小

是二元混杂变量,偏差(bias)定义为:

简化:

时偏差非零,且偏差的大小由 的相关性决定。


六、与前后内容的衔接

继承

解决:建立了因果效应与统计相关之间的本质区别,解释了辛普森悖论和混杂偏差的来源。

引出


章节摘要

  • 统计相关 是纯数学描述,因果效应 描述因果机制
  • 混杂是使两者不同的最常见原因——共同原因变量同时影响
  • 辛普森悖论:分层后因果效应方向与总体相关方向相反,本质是混杂导致的分层不均匀
  • 随机对照试验通过 确保统计相关等于因果效应
  • 选择性偏差来自样本选择过程,不是因果效应本身的问题
  • 控制混杂的方法:后门准则、前门准则、工具变量

关键词

因果效应 vs 统计相关 | 辛普森悖论 | 混杂 | 选择性偏差 | 随机对照试验 | 后门准则 | vs