在Standalone模式下,RDD操作所在的机器未必是提交任务的机器,所以输出RDD元素在提交任务的机器未必可以显示,
解决方案:先把数据collect收集起来,然后打印收集的数据(生产环境不建议使用collect算子),可以正常打印:
Spark集群Standalone模式下spark-shell控制台println不显示问题
于 2022-01-11 09:23:21 首次发布
在Standalone模式下,RDD操作所在的机器未必是提交任务的机器,所以输出RDD元素在提交任务的机器未必可以显示,
解决方案:先把数据collect收集起来,然后打印收集的数据(生产环境不建议使用collect算子),可以正常打印: