- 博客(1)
- 收藏
- 关注
原创 Spark面对OOM问题的解决方法及优化总结
分布式计算系统最常见的问题就是OOM问题,本文主要讲述Spark中OOM问题的原因和解决办法,并结合笔者实践讲述了一些优化技巧。涉及shuffle内存溢出,map内存溢出。spark代码优化技巧和spark参数优化技巧。
2016-04-01 11:52:28 61780 2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人
公开笔记分享
分布式计算系统最常见的问题就是OOM问题,本文主要讲述Spark中OOM问题的原因和解决办法,并结合笔者实践讲述了一些优化技巧。涉及shuffle内存溢出,map内存溢出。spark代码优化技巧和spark参数优化技巧。
2016-04-01 11:52:28 61780 2
TA创建的收藏夹 TA关注的收藏夹
TA关注的人