今日完成
今天听了老师的建议之后,回来看了一下测试集和验证集的分布,果不其然,非常的不匹配。
可以看到的是,测试集数据大多集中在0-50000,而验证集大金额分布更多,所以我们有理由相信,训练集缺少对大金额数据训练。
所以就用train.test.split把数据加在一起之后又分分组。
所以就变成这样了。
训练了一下,效果还不错。
明日计划
因为数据问题已经找到并且解决了,所以明天就应该上模型继续计算了。
今天用adam算了一下,还是收敛不到最优点,看样子应该要优化器了,NAG或者SGD。
今日感想
数据规模还是小了。
主要还是没有经验,对于这种情况还是不太明白原因,吃一堑长一智吧。