spark-mllib
Jacquelin_1
这个作者很懒,什么都没留下…
展开
-
pyspark ml 报错: need struct type but got struct type:tinyint,size:int,indices:array
pyspark model transform 之后出现列probability,若要提取预测为1的概率:直接对原列处理的报错:`argument 1 requires string type, however, 'probability' is of struct<type:tinyint,size:int,indices:array<int>,values:array&...原创 2020-03-25 10:12:13 · 5435 阅读 · 0 评论 -
基于隐语义模型(LFM)的协同过滤推荐算法(ALS)
在Python里,直接用LFM就可以,在scala里边,借助spark-mllib的ALS模型,可以理解ALS是在spark里LFM思想的解决方案。之前试过Python的,Python确实写的少是门优秀的机器学习语言,但是spark是大环境所趋,scala开发后放进MongoDB里也是很合时宜的选择,贴一下scala的代码,后面发现更好用的函数...原创 2019-06-15 10:48:14 · 4198 阅读 · 6 评论