- 博客(2)
- 收藏
- 关注
转载 GC调优在Spark应用中的实践
Spark立足内存计算,常常需要在内存中存放大量数据,因此也更依赖JVM的垃圾回收机制。与此同时,它也兼容批处理和流式处理,对于程序吞吐量和延迟都有较高要求,因此GC参数的调优在Spark应用实践中显得尤为重要。 Spark是时下非常热门的大数据计算框架,以其卓越的性能优势、独特的架构、易用的用户接口和丰富的分析计算库,正在工业界获得越来越广泛的应用。与Hadoop、HBase生态圈的众多项目一
2016-08-30 22:29:02 729
转载 spark 中rdd与dataframe的合并
/* * Licensed to the Apache Software Foundation (ASF) under one or more * contributor license agreements. See the NOTICE file distributed with * this work for additional information regarding copy
2016-08-11 22:57:41 3037
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人