spark executor配置多个core，即一个executor同时运行多个task时，每个task能分配的内存是多少

当有多个 Task 同时在 Executor 上执行时， 将会有多个 TaskMemoryManager 共享 MemoryManager 管理的内存。那么 MemoryManager 是怎么分配的呢？

答案是每个task任务可以分配到的内存范围是 [1 / (2 * n), 1 / n]，其中 n 是正在运行的 Task 个数。因此，多个并发运行的 Task 会使得每个 Task 可以获得的内存变小。

 

注意：TaskMemoryManager是每个task的内存管理器，MemoryManager是每个executor的内存管理器，一一对应

 

 

具体概念可以看：https://www.sohu.com/a/301864375_315839