等价检验 VS 显著性检验

传统显著性检验用于推断样本所代表的总体均值是否相等，它的检验假设为样本来自同一总体(即总体均值相等)。在应用中，显著性检验结果不能评价差别的大小，也不能说明差别是否有实际意义，所谓差别显著是指在统计学理论上认为样本来自不同的总体。另外显著性检验在均值差异性比较中也存在一定的局限性，下面我们以双样本t检验为例来说明。

显著性检验的局限性

我们看到下表1中两种测试方法得到的数据，希望比较两种测试方法得到的结果是否一致（等效）。

可能首先想到的方法就是用双样本t检验，我们来试试看（前提条件验证略）。

 

双样本t检验的结果显示，P=0.001＜0.05，所以我们得到的结论是：两种测试方法的结果是有显著性差异的。拒绝是有说服力的，所以我们也不用担心犯第二类错误。

现在我们再来看看下表2中两种测试方