【机器学习总结】CV制作方法

最近在参加KDD2017的比赛，之前一直都做的挺乱的，感觉没有一个系统的分析数据，所以今天请教了一下大神，请教了一下他是怎么参与这种比赛的。
首先如果想取得一份好的成绩，那么CV就非常有必要。但是想取一份好的CV不是那么容易，需要非常复杂的工作程序才能获得。
在这里简单记录一下CV的制作方式：
1）首先我们统计一下测试集的特征分布
2）我们去在训练集里面找与测试集样们分布一致的作为CV
3）我们通过我们的CV结果与其他训练集的特征进行双边检测，然后决定输入样。
4）最后我们用这样的输入关系用在测试集上面。
在这里可能用到假设检验，ks-test，卡方检验等双边检验。
方差
相关性检验