- 博客(1)
- 资源 (3)
- 问答 (1)
- 收藏
- 关注
原创 spark udf传入复杂结构参数
笔者在使用LSH 获取相似文本时,遇到返回的Dataframe的结果比较复杂,如下:现在想使用UDF函数处理datasetA和datasetB的内容,但是由于数据结构复杂,无法直接写参数,所以需要使用Row,代码如下: val getIdFun = udf((input:Row)=> { input(0).toString.toInt; ...
2018-07-03 23:42:54 4258 1
spark dataframe如何把一列由数组变成向量
2017-10-05
TA创建的收藏夹 TA关注的收藏夹
TA关注的人