前面 介绍了SortShuffleWriter insertAll的步骤,主要记录一个task处理rdd中的某个分区中的数据的过程。 本篇主要结束将insertAll后的数据生成一个排序好的文件。主要记录了大概的过程以及学习的过程中自己的一些总结(该文章主要是作为自己的学习笔记使用,内容较为简单,可能只能自己看懂吧)
![](https://i-blog.csdnimg.cn/blog_migrate/6e9c8341a0788499d74bcba2d82dec9e.png)
前面 介绍了SortShuffleWriter insertAll的步骤,主要记录一个task处理rdd中的某个分区中的数据的过程。 本篇主要结束将insertAll后的数据生成一个排序好的文件。主要记录了大概的过程以及学习的过程中自己的一些总结(该文章主要是作为自己的学习笔记使用,内容较为简单,可能只能自己看懂吧)