Spark
文章平均质量分 81
dingyuanpu
QQ:d-y-p@qq.com
展开
-
Spark性能优化指南——基础篇
Spark性能优化指南——基础篇转自:http://tech.meituan.com/spark-tuning-basic.html前言在大数据计算领域,Spark已经成为了越来越流行、越来越受欢迎的计算平台之一。Spark的功能涵盖了大数据领域的离线批处理、SQL类处理、流式/实时计算、机器学习、图计算等各种不同类型的计算操作,应用范围与前景非常广泛。在美团•大众点评转载 2016-08-20 22:48:00 · 331 阅读 · 0 评论 -
Spark性能优化指南——高级篇
Spark性能优化指南——高级篇转自:http://tech.meituan.com/spark-tuning-pro.html?utm_source=tuicool&utm_medium=referral前言继基础篇讲解了每个Spark开发人员都必须熟知的开发调优与资源调优之后,本文作为《Spark性能优化指南》的高级篇,将深入分析数据倾斜调优与shuffle调优,以转载 2016-08-20 22:53:59 · 255 阅读 · 0 评论 -
Spark在美团的实践
Spark在美团的实践转自:http://tech.meituan.com/spark-in-meituan.html本文已发表在《程序员》杂志2016年4月期。前言美团是数据驱动的互联网服务,用户每天在美团上的点击、浏览、下单支付行为都会产生海量的日志,这些日志数据将被汇总处理、分析、挖掘与学习,为美团的各种推荐、搜索系统甚至公司战略目标制定提供数据支持。大数转载 2016-08-20 23:00:46 · 525 阅读 · 0 评论