- 博客(1)
- 收藏
- 关注
RSS订阅原创 spark一个奇怪的bug
见下面代码:val right_rdd=rightplan.execute() val right_result=right_rdd.collect()rightplan是一个SparkPlan，若直接collect取数据，则取到的数据集是每个分区内部的最后一条数据*分区内的总记录个数: 但是单独取InternalRow行内的数据的话，是可以取到的,真实数据集是: collec
2017-12-04 16:19:07
292
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人