【人工智能的数学基础】机器学习中的假设检验(Hypothesis Test)
若假设“所有模型的性能相同”被拒绝,则说明模型的性能显著不同。在统计学中,总体分布往往是未知的,只能从中进行有限的抽样从而获得部分样本的信息。有时需要对总体的特征做出某种假设,如何判断该假设是正确的还是错误的?个模型进行比较,首先在每个数据集上根据留出法或交叉验证法得到所有模型测试结果,根据测试性能对这些模型由好到坏排序,并赋予序值。首先提出一个待检验的假设(该假设通常是想要去否定的),通过统计方法试图证明该假设是小概率事件,利用。若假设所有模型的性能相同,则这些模型的平均序值应该相同。
复制链接