- 博客(1)
- 资源 (4)
- 收藏
- 关注
原创 关于spark.sql.autoBroadcastJoinThreshold设置
今天使用spark对一组大数据进行合并作join操作,一直都报下面的错:Exception in thread “broadcast-exchange-0” java.lang.OutOfMemoryError: Not enough memory to build and broadcast the table to all worker nodes想来想去,之前也跑过这类的任务,并且都...
2018-11-05 17:30:09 26564 3
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人