- 博客(3)
- 资源 (1)
- 收藏
- 关注
RSS订阅转载 spark调优（一）-开发调优，数据倾斜，shuffle调优
spark调优（一）-开发调优，数据倾斜，shuffle调优 主要分为开发调优、资源调优、数据倾斜调优、shuffle调优几个部分。 开发调优和资源调优是所有Spark作业都需要注意和遵循的一些基本原则，是高性能Spark作业的基础；数据倾斜调优，主要讲解了一套完整的用来解决Spark作业数据倾斜的解决方案；shuffle调优，面向的是对Spark的原理有较深层次掌握和研究的同学，主要讲解了如何对Spark作业的shuffle运行过程以及细节进行调优。 一：开发调优 在开发Spark作业的过程中注意和应用一
2022-02-16 13:56:03
229
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人