第 12 讲:拟合优度、列联表与非参数检验

前面的检验大多假设总体属于某个分布族。拟合优度检验问“这个分布假设整体是否合理”;非参数检验则尽量减少对具体分布形状的依赖。

Pearson 卡方拟合优度检验

把样本分入 kk 类,观察频数为 OiO_i。若 H0H_0 给出的类别概率为 pip_i,期望频数 Ei=npiE_i=np_i,统计量

X2=∑i=1k(Oi−Ei)2Ei.X^2=\sum_{i=1}^k\frac{(O_i-E_i)^2}{E_i}.

当期望频数足够大时,若所有 pip_i 完全已知,

X2≈χ2(k−1).X^2\approx\chi^2(k-1).

若从同一数据估计了 rr 个独立参数,自由度要再减 rr:

ν=k−1−r.\nu=k-1-r.

期望频数过小的类别应合并,否则卡方近似不可靠。

连续分布的拟合优度

检验正态性等连续分布时,可先按区间分组,再计算每组理论概率。若均值、方差由样本估计,记得扣除两个自由度。课件也涉及专门的正态性检验;不同统计量的临界值不能混用。

列联表独立性检验

r×cr\times c 列联表中,原假设是行变量与列变量独立。第 (i,j)(i,j) 格的期望频数为

Eij=(第 i 行合计)(第 j 列合计)n.E_{ij}=\frac{(\text{第 }i\text{ 行合计}) (\text{第 }j\text{ 列合计})}{n}.

仍使用

X2=∑i,j(Oij−Eij)2Eij≈χ2((r−1)(c−1)).X^2=\sum_{i,j}\frac{(O_{ij}-E_{ij})^2}{E_{ij}} \approx\chi^2((r-1)(c-1)).

拒绝独立性只说明存在关联,不说明因果关系;还应观察哪些格子的标准化残差最大。

单样本符号检验

检验总体中位数 m=m0m=m_0 时,只记录每个观测在 m0m_0 上方还是下方。连续分布且 H0H_0 成立时,正号数

B∼Binomial⁡(n,1/2).B\sim\operatorname{Binomial}(n,1/2).

它非常稳健,但丢掉了距离信息,功效通常低于适用前提满足时的 tt 检验。

Wilcoxon 符号秩检验

对配对差值,去掉零差,按 ∣Di∣|D_i| 排秩,再分别求正、负秩和。它不仅使用方向,还利用相对大小。除独立和连续外,常需差值分布关于中位数对称。

两独立样本秩和检验

Mann–Whitney/Wilcoxon 秩和检验把两组数据合并排序,考察一组的秩是否系统偏大。两组分布形状相同时可解释为位置差异;形状不同时,拒绝结论只是分布不同,不能简单说中位数不同。

选择原则

  • 模型前提可信、数据近似正态:参数检验通常功效更高;
  • 明显离群、等级数据或分布难以指定:非参数检验更稳;
  • 小样本时优先精确分布,不要只靠大样本近似;
  • “非参数”不是“没有任何假设”,每种检验仍有自己的独立性、对称性或同形状前提。

评论