目录 1. shuffle详解 1.1 那么到底什么时shufffle? reduceByKey的含义? 问题: 如何聚合? 1.2 Shuffle分为shuffle和sortShuffle 1.2.1 shuffle普通机制 1.2.2 shuffle合并机制 1.2.3 SortShuffle普通运行机制 1.3 shuffle文件寻址 1.4 shuffle调优 2. spark的内存管理机制 2.1 静态内存管理机制