![](https://img-blog.csdnimg.cn/20201014180756916.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
spark
mengxb12138
这个作者很懒,什么都没留下…
展开
-
Spark性能优化
spark性能优化 就是为spark分配更多的资源 让集群更好的运行,下分为以下两种,资源优化与代码优化资源优化原创 2017-05-26 11:46:17 · 429 阅读 · 0 评论 -
Spark trouble shooting
yarn-client模式下导致的网卡流量激增 解决算子函数返回NULL导致问题 在算子函数中,返回null return actionRDD.mapToPair(new PairFunction() { private static final long serialVersionUID = 1L; @Override public Tuple2 call(原创 2017-06-04 20:02:32 · 380 阅读 · 0 评论