- 博客(2)
- 收藏
- 关注
转载 Hive在跑union all的时候怎么打开并行
项目方案:Hive在跑union all的时候如何实现并行计算1. 背景介绍在大数据处理中,Hive是一个常用的数据仓库工具,用于查询和分析大规模的数据。在一些场景下,我们需要对多个表进行union all操作来合并数据,但是这个操作比较耗时,如何实现并行计算来提高查询性能是一个重要的问题。2. 方案设计我们可以通...
2024-07-15 03:46:35
37
原创 golang 高频服务延时抖动追因
一,背景策略组同学反馈有个服务上线后 redis 写超时非常严重,严重到什么地步呢,写redis 毛刺超过100ms! 而且不是随机出现,非常多,而且均匀,导致整个接口超时严重。因为用的redis 库是由我们组维护,所以任务落我们组小伙伴头上了。这个项目有非常复杂的业务逻辑,有密集型io(调度问题)+定时任务(cpu问题)+常驻内存cache(gc问题),频繁访问redis,在定时逻...
2024-02-17 15:18:27
762
1
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人