推荐系统指标——关于NDCG等ranking measures的一个问题

我的问题是：whether the recommendation list includes unrated items ，于是在搜索引擎里搜关键的几个单词recommendation list includes unrated items，找到了文章《Recommender system and linked open data》，它帮我解惑了。

1. 我习惯的推荐系统中的数据集为一个全集=训练集U测试集，且训练集测试集之间没有交集。

在这篇文章的描述中，这样是一种rating prediction，并非ranking。

2. 此书中的两个重要截图为：

 3. 也就是说，根据训练集得到一个模型，对于某个用户u_i，其推荐列表应该在全集中除开训练集后的余下物品里求得。也就是说，该推荐列表中的物品可能是unrated item或者测试集中的物品。

4. 在求NDCG时，需要比较推荐列表和testing set中的物品。若测试集中的物品在推荐列表中，求出它们的DCG。将这些物品按照其在测试集中的评分排序，得到一个理想的排序，从而求得IDCG。