- 博客(2)
- 收藏
- 关注
RSS订阅原创 Spark Operator 是如何提交 Spark 作业
文章目录OverviewSpark Operator 中的 spark-submit 命令Summary Overview 本文将 Spark 作业称为 Spark Application 或者简称为 Spark App 或者 App。目前我们组的计算平台的 Spark 作业，是通过 Spark Operator 提交给 Kubernetes 集群的，这与 Spark 原生的直接通过 spark-...
2019-10-12 16:21:37
1305
原创 Spark on Kubernetes 动态资源分配
文章目录1 Overview2 Spark on Kubernetes 的发展3 Dynamic Resource Allocation 动态资源申请4 External Shuffle Service5 Spark on Kubernetes 的动态资源申请6 Summary 1 Overview 本文主要讲述了 Spark on Kubernetes 的发展过程和 Dynamic Resour...
2019-10-04 21:21:54
1683
2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人