自定义博客皮肤VIP专享

*博客头图：

点击选择上传的图片

格式为PNG、JPG，宽度*高度大于1920*100像素，不超过2MB，主视觉建议放在右侧，请参照线上博客头图

请上传大于1920*100像素的图片！

博客底图：

点击选择上传的图片

图片格式为PNG、JPG，不超过1MB，可上下左右平铺至整个背景

栏目图：

点击选择上传的图片

图片格式为PNG、JPG，图片宽度*高度为300*38像素，不超过0.5MB

主标题颜色：

RGB颜色，例如：#AFAFAF

Hover：

RGB颜色，例如：#AFAFAF

副标题颜色：

RGB颜色，例如：#AFAFAF

预览取消提交

自定义博客皮肤

上一步保存

Glad_Xiao的博客

Glad_Xiao CSDN认证博客专家 CSDN认证企业博客

码龄9年

暂无认证

11: 原创

122万+: 周排名

221万+: 总排名

4万+: 访问

: 等级

343: 积分

3: 粉丝

5: 获赞

8: 评论

8: 收藏

私信

关注

分类专栏

scala 3篇
spark 6篇
hadoop 2篇

最新评论

Spark RDD转换成其他数据结构
福瑞思: 就不能把左边那一排去了吗浏览器不全屏还看不全文章
scala应用-基于user协同过滤的推荐系统
cleargy: 您好博主，第37行SimilarityMetrics.pearsonCorrelation函数没有传参数呀，请问可以补充下不？
scala应用-基于user协同过滤的推荐系统
Glad_Xiao 回复天天向上的程序圆: Scala版本的代码并没有做，不过和Spark RDD的评估类似，你把RDD看作Map就可以了。 def evaluate[T <: (_, List[_])](predictSet: RDD[(Long, List[Long])], testSet: RDD[(Long, List[Long])], totalMusic: Long): evaluation = { val joined = predictSet.join(testSet) val ans = joined.map( x => { val intersectSize = x._2._1.intersect(x._2._2).size (intersectSize, x._2._1.size, //predictSet x._2._2.size, //testSet if(intersectSize != 0) 1 else 0 // hit ) } ).reduce( (x, y) => (x._1 + y._1, x._2 + y._2, x._3 + y._3, x._4 + y._4) ) val interNum = ans._1.toDouble val unionNumR = ans._2.toDouble val unionNumT = ans._3.toDouble val hitNum = ans._4.toDouble val recommendNum = predictSet.flatMap(_._2).distinct().count().toDouble evaluation(interNum / unionNumT, interNum / unionNumR, hitNum / userNum, recommendNum / totalMusic) }
scala应用-基于user协同过滤的推荐系统
Glad_Xiao 回复天天向上的程序圆: 皮尔森相似度计算只用于找邻居。而你所说的那行代码是找完邻居后对评分预测，最后对预测评分的一个归一化处理。
scala应用-基于user协同过滤的推荐系统
天天向上的程序圆: //TODO 评估推荐效果 recList和testData比较楼主比较的代码可以发给我吗，非常感谢~

scala

关注

关注数：文章数：3 文章阅读量：5368 文章收藏量：4

作者: Glad_Xiao

这个作者很懒，什么都没留下…

展开

Glad_Xiao的博客

scala

作者: Glad_Xiao

scala应用-基于user协同过滤的推荐系统

Scala集合一些操作

scala中 -> 与 <- 操作符的区别