- 博客(2)
- 收藏
- 关注
原创 多线程之synchronized 关键字
synchronized多线程问题//希望输出是0,但结果几乎每次都不一样public class IncTest { private volatile static int i = 0; public static void main(String[] args) throws InterruptedException { Thread a = new T...
2019-12-05 12:56:42 88
原创 spark smart shuffle 介绍
大家好,我是cc,今天给大家介绍一个基于阿里内部使用的spark shuffle相关优化,主要通过并行化和减少io操作来提升shuffle效率。spark shuffle 介绍spark shuffle 简介spark里面支持很多操作,例如map,filter,reduceByKey,reduce等等。每个操作之后都会生成一个新的rdd,而后生成的为子rdd,子rdd的单个partitio...
2019-11-18 17:31:13 311
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人