- 博客(2)
- 资源 (3)
- 收藏
- 关注
原创 HiveSQL 中group by 、join转MapReduce作业 过程详解
HiveSQL 中group by 、join转MapReduce作业 过程详解
2019-04-16 11:10:03 2225 1
原创 spark streaming、kafka 内存调优、分区调优
spark Streaming 限速spark.streaming.kafka.maxRatePerPartition而在Direct Approach,则是通过参数 spark.streaming.kafka.maxRatePerPartition 来配置的。这里需要注意的是,这里是对每个Partition进行限速。所以你需要事先知道Kafka有多少个分区,才好评估系统的实际吞吐量,从而...
2019-04-08 16:30:50 3314
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人