- 博客(4)
- 收藏
- 关注
转载 Hadoop YARN常见问题以及解决方案
http://dongxicheng.org/mapreduce-nextgen/hadoop-yarn-problems-vs-solutions/ 本文汇总了几个hadoop yarn中常见问题以及解决方案,注意,本文介绍解决方案适用于hadoop 2.2.0以及以上版本。 (1) 默认情况下,各个节点的负载不均衡(任务数目不同),有的节点很多任务在跑,有的没有任务
2017-11-21 11:40:00 1785
转载 Apache Spark Jobs 性能调优(二)
http://blog.csdn.net/wisgood/article/details/51436177 原文地址:http://blog.cloudera.com/blog/2015/03/how-to-tune-your-apache-spark-jobs-part-2/ Apache Spark Jobs 性能调优(二) 调试资源分配调试并发压
2017-11-08 21:35:25 253
转载 Apache Spark Jobs 性能调优(一)
https://www.zybuluo.com/xiaop1987/note/76737 原文地址:http://blog.cloudera.com/blog/2015/03/how-to-tune-your-apache-spark-jobs-part-1/ Apache Spark Jobs 性能调优(一) Spark 是如何执行程序的选择正确的 Oper
2017-11-08 21:10:05 305
转载 Spark 1.6 内存管理模型( Unified Memory Management)分析
http://www.jianshu.com/p/b250797b452a 2016年1月4号 Spark 1.6 发布。提出了一个新的内存管理模型: Unified Memory Management。这篇文章会详细分析新的内存管理模型,方便大家做调优。 前言 新的内存模型是在这个Jira提出的,JIRA-10000,对应的设计文档在这:unified-memory-managem
2017-11-08 11:58:44 577
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人