文章目录
类别变量的推断
一个类别变量的拟合优度检验
只研究一个类别变量的时候,可以用 χ 2 \chi^2 χ2 检验来判断各类别频数与某一期望频数是否一致。
- 观察频数:观察到的各类别实际的频数
- 期望频数:期望中各类别的频数
注意:这里频数不是比例
拟合优度检验:也称一致性检验,用于检验观察频数和期望频数是否一致,使用的统计量为 Pearson χ 2 \chi^2 χ2 :
χ 2 = ∑ ( f o − f e ) 2 f e \chi^2=\sum\frac{(f_{o}-f_{e})^{2}}{f_{e}} χ2=∑fe(fo−fe)2
其中
χ
2
\chi^2
χ2 服从自由度为
k
−
1
k-1
k−1 的
χ
2
\chi^2
χ2 分布,
k
k
k 为类别数目。
提出假设:
- H 0 H_{0} H0 :观察频数与期望频数无显著差异(无明显偏好)
-
H
1
H_{1}
H1 :观察频数与期望频数有显著差异(有明显偏好)
两类问题 : - 期望频数相等:每个类别的期望频数是相等的,比如我们要检验消费者对某些类别的产品是否有明显偏好
- 期望频数不等:每个类别的期望频数不等,比如我们要检验某个地区对某项政策的评价是否和全国人民对该政策的平均评价一致
计算完 χ 2 \chi^2 χ2 后,也是用 P P P 值检验(取右尾概率)
两个类别变量的独立性检验
列联表与 χ 2 \chi^2 χ2 独立性检验
列联表:两个或多个类别变量,每个类别变量包含许多类别,则将不同类别变量交叉分类的频数写成分布表,称为列联表
提出假设:(以下都是两个类别变量的情况)
- H 0 H_{0} H0 :两个变量独立(无关)
-
H
1
H_{1}
H1 :两个变量不独立(相关)
两个变量 χ 2 \chi^2 χ2 独立性检验的统计量为:(自由度为 ( r − 1 ) ( c − 1 ) (r-1)(c-1) (r−1)(c−1))
χ 2 = ∑ ∑ ( f o − f e ) 2 f e \chi^2=\sum\sum\frac{(f_{o}-f_{e})^{2}}{f_{e}} χ2=∑∑fe(fo−fe)2
观察频数就是我们统计出来的值;单元格
i
j
ij
ij 期望频数的计算方法为:
f
e
=
R
T
i
n
×
C
T
j
n
×
n
f_{e}=\frac{RT_{i}}{n}\times\frac{CT_{j}}{n}\times n
fe=nRTi×nCTj×n
其中:
- R T i RT_{i} RTi 为第 i i i 行的频数之和, R T i n \frac{RT_{i}}{n} nRTi 即为第 i i i 行的类别所观察到的比例
- C T j CT_{j} CTj 为第 j j j 行的频数之和, C T j n \frac{CT_{j}}{n} nCTj 即为第 j j j 列的类别所观察到的比例
应用 χ 2 \chi^2 χ2 检验应该注意的问题
应用 χ 2 \chi^2 χ2 检验时,要求样本量足够大,特别是每个单元格的期望频数不能太小。否则期望频数在分母,太小的话会导致 χ 2 \chi^2 χ2 变大, P P P 值变小,从而拒绝原假设。因此,应用 χ 2 \chi^2 χ2 检验时对单元格的期望频数有以下要求:
- 如果仅有两个单元格,单元格的最小期望频数不应小于 5;
- 单元格两个以上时,期望频数小于 5 的单元格不能超过 20%;如果出现这种情况,可以通过合并类别的方式处理。
两个类别变量的相关度检验
如果前边独立性检验拒绝了 H 0 H_{0} H0 ,也就是说这两个变量不独立,此时可以进一步测度它们的关联程度,常使用 φ \varphi φ 系数、Cramer’s V V V 系数和列联系数作为检验统计量。
φ \varphi φ 系数
φ
\varphi
φ 系数主要用于
2
×
2
2\times2
2×2 列联表的相关性测量:
φ
=
χ
2
n
\varphi=\sqrt{ \frac{\chi^2}{n} }
φ=nχ2
对于
2
×
2
2\times2
2×2 列联表,
φ
\varphi
φ 取值为
0
∼
1
0\sim 1
0∼1 ,越接近 1 表示两个变量的相关性越强;
当列联表变大时,
φ
\varphi
φ 的值会随着变大,此时不好解释
φ
\varphi
φ 的含义。
Cramer’s V V V 系数
Cramer’s
V
V
V 系数由 Cramer 提出,计算公式为:
V
=
χ
2
n
×
min
(
(
r
−
1
)
,
(
c
−
1
)
)
V=\sqrt{ \frac{\chi^{2}}{n\times \min{((r-1),\,(c-1))}} }
V=n×min((r−1),(c−1))χ2
其中
r
r
r 和
c
c
c 分别为行数和列数;当行数或列数为
2
2
2 时,Cramer’s
V
V
V 系数就等于
φ
\varphi
φ 系数。
Cramer’s
V
V
V 系数的取值总是在
0
∼
1
0\sim 1
0∼1 :
- 当两个变量独立时, V = 0 V=0 V=0 ;
- 当两个变量完全相关时, V = 1 V=1 V=1 ;
列联系数
列联系数主要用于大于
2
×
2
2\times2
2×2 的列联表,用
C
C
C 表示,计算公式为:
C
=
χ
2
χ
2
+
n
C=\sqrt{ \frac{\chi^{2}}{\chi^{2}+n} }
C=χ2+nχ2
当两个变量独立时,
C
=
0
C=0
C=0 ;但两个变量完全相关时,
C
C
C 也不等于
1
1
1 ,因此对列联系数的解释就不够方便。