模型指标评估,模型本身指标的评估
1、测试集评估
2、线上指标评估
业务指标评估,方便给业务方进行解释,模型能实际产生的效果
1、测试集业务指标评估
2、线上回测业务指标评估
为什么要进行线上评估,在模型开发过程中,遇到的数据真的是各种情况都可能遇到,主要排除的是特征泄露导致的训练集模型效果很好,但是实际效果并不好,这样只能在生产上进行验证
模型指标评估,模型本身指标的评估
1、测试集评估
2、线上指标评估
业务指标评估,方便给业务方进行解释,模型能实际产生的效果
1、测试集业务指标评估
2、线上回测业务指标评估
为什么要进行线上评估,在模型开发过程中,遇到的数据真的是各种情况都可能遇到,主要排除的是特征泄露导致的训练集模型效果很好,但是实际效果并不好,这样只能在生产上进行验证