Spark优化
huanbia
这个作者很懒,什么都没留下…
展开
-
Spark性能优化指南——高级篇
本文引自:https://zhuanlan.zhihu.com/p/22024169美团点评技术团队8 个月前前言继基础篇讲解了每个Spark开发人员都必须熟知的开发调优与资源调优之后,本文作为《Spark性能优化指南》的高级篇,将深入分析数据倾斜调优与shuffle调优,以解决更加棘手的性能问题。数据倾斜调优调优概述有的时候,我转载 2017-04-06 08:25:14 · 1166 阅读 · 0 评论 -
Spark性能优化指南——基础篇
本文引自:http://tech.meituan.com/spark-tuning-basic.html前言在大数据计算领域,Spark已经成为了越来越流行、越来越受欢迎的计算平台之一。Spark的功能涵盖了大数据领域的离线批处理、SQL类处理、流式/实时计算、机器学习、图计算等各种不同类型的计算操作,应用范围与前景非常广泛。在美团•大众点评,已经有很多同学在各种项目中尝试使用Sp转载 2017-04-06 08:28:02 · 365 阅读 · 0 评论