- 博客(2)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 HiveSQL 中group by 、join转MapReduce作业 过程详解
HiveSQL 中group by 、join转MapReduce作业 过程详解
2019-04-16 11:10:03
2225
1
原创 spark streaming、kafka 内存调优、分区调优
spark Streaming 限速spark.streaming.kafka.maxRatePerPartition而在Direct Approach，则是通过参数 spark.streaming.kafka.maxRatePerPartition 来配置的。这里需要注意的是，这里是对每个Partition进行限速。所以你需要事先知道Kafka有多少个分区，才好评估系统的实际吞吐量，从而...
2019-04-08 16:30:50
3314
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人