推荐系统评测指标
1、用户满意度
2、预测准确度
评分指标
TopN推荐
覆盖率
(准确率、召回率曲线)
覆盖率衡量函数(信息熵,基尼系数)
多样性
新颖性 (用户是否听说过这个结果)
惊喜度(如果推荐结果和用户的历史兴趣不相似,但却让用户觉得满意,那么就可以说推荐结果的惊喜度高)
信任度
实时性
健壮性(尽量使用代价比较高的用户行为)
离线优化指标
最大化预测准确度
覆盖率>A
多样性>B
新颖性>C
评测维度
用户维度 主要包括用户的人口统计学信息、活跃度以及是不是新用户等。
物品维度 包括物品的属性信息、流行度、平均分以及是不是新加入的物品等。
时间维度 包括季节,是工作日还是周末,是白天还是晚上等。
热门排行榜的覆盖率是很低的