- 博客(2)
- 收藏
- 关注
RSS订阅
原创 多线程之synchronized 关键字
synchronized 多线程问题 //希望输出是0，但结果几乎每次都不一样 public class IncTest { private volatile static int i = 0; public static void main(String[] args) throws InterruptedException { Thread a = new T...
2019-12-05 12:56:42
74
原创 spark smart shuffle 介绍
大家好，我是cc，今天给大家介绍一个基于阿里内部使用的spark shuffle相关优化，主要通过并行化和减少io操作来提升shuffle效率。 spark shuffle 介绍 spark shuffle 简介 spark里面支持很多操作，例如map,filter,reduceByKey,reduce等等。每个操作之后都会生成一个新的rdd， 而后生成的为子rdd，子rdd的单个partitio...
2019-11-18 17:31:13
290
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人