Significance test 是statistics中非常重要的概念,在information retrieval中非常典型的应用是用于比较两组实验结果(由两个模型产生)是否具有显著性差异。
常用的significance test有Z-test和t-test。
关于Z-test相关资料。
Z-test (非常详细的介绍了significance test的背景和含义,包括怎么设定null hypothesis和alternative hypothesis,如何reject null hypothesis,什么是one-tail以及two-tail).
关于t-test相关资料: