对于比赛,有一个有标签的数据集
把数据集划分为训练集,验证集,测试集
吴恩达还提出了训练-测试集的概念
同时说验证集和测试集同分布,训练集和训练测试集同分布
而实际比赛中划分的数据集我认为训练集验证集测试集都是同分布(一个数据集划分出来的)让你预估标签的数据集这里我不把它叫为测试集
在k折交叉验证中,说法是通过不同的测试验证集划分调整参数,我觉得这样只能调整较好的参数,网上说超参数手动调,可我没找到如何人工调整,经验加实验?得到较好的参数模型之后把训练集和验证集放一起当做训练集再次训练(不明白为什么要再次训练,模型的参树已将有了啊,为了再优化一点点?)
以上就是了解和疑惑
烦恼的就是测试集也是与训练集同一数据集划分出来的,应该也是同分布,与吴恩达说的(验证集和测试集)与训练集不同分布不符。可能是数据条件的限制,还有就是如何通过k折交叉验证调整超参数的。
数据集的划分及交叉验证
最新推荐文章于 2023-01-08 11:06:52 发布