1.hive 内存溢出
1、Mapper/Reducer阶段JVM内存溢出(一般都是堆) ---参数的修改
2. MRAppMaster内存不足 ---参数的修改
2 .python 排虫中URL的去重和反爬机制
3 . spark groupby
4 sparkStreaming 当数据聚变,怎么优化
5 线程池
1.hive 内存溢出
1、Mapper/Reducer阶段JVM内存溢出(一般都是堆) ---参数的修改
2. MRAppMaster内存不足 ---参数的修改
2 .python 排虫中URL的去重和反爬机制
3 . spark groupby
4 sparkStreaming 当数据聚变,怎么优化
5 线程池