local :就是单机,jobs都在这台机器上运行。
standalone:就是说多台机器组成一个集群,然后jobs可以分在多台机器上运行
yarn:就是说spark程序运行在yarn上
client :就是Jobs在不同机器运行,然后结果返回到这台机器上。
cluster : 就是说jobs在不同机器上运行,结果返回到集群中的某一台机器上。
Spark运行模式的区别
最新推荐文章于 2024-03-04 15:21:05 发布
local :就是单机,jobs都在这台机器上运行。
standalone:就是说多台机器组成一个集群,然后jobs可以分在多台机器上运行
yarn:就是说spark程序运行在yarn上
client :就是Jobs在不同机器运行,然后结果返回到这台机器上。
cluster : 就是说jobs在不同机器上运行,结果返回到集群中的某一台机器上。