incredibleWu的博客

原创 spark笔记（3）—— spark2.x内存管理模型

文章目录1、简介2、内存分配2.1、静态内存管理器2.2、统一内存管理器2.2.1、堆内内存(On-heap Memory)2.2.2、堆外内存(Off-heap Memory)3、Execution 内存和 Storage 内存动态调整4、Task 之间内存分布5、demo1、简介  spark作为基于内存的分布式计算引擎，其内存管理模型在整个系统中起着非常重要的作用。了解Spark内存管理...