- 博客(2)
- 收藏
- 关注
原创 Spark调优实战
首先解释一下名词:num-executors 线程数:一般设置在50-100之间,必须设置,不然默认启动的executor非常少,不能充分利用集群资源,运行速度慢executor-memory 线程内存:参考值4g-8g,num-executor乘以executor-memory不能超过队列最大内存,申请的资源最好不要超过最大内存的1/3-1/2executor-cores 线...
2020-03-03 15:15:23 353 2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人