flink性能调优
关注
分享
扫一扫
文章平均质量分 95
# flink性能调优
roman_日积跬步-终至千里
做三四月的事，在八九月自有答案。
展开
-
【性能调优】local模式下flink处理离线任务能力分析
本文相关讨论> 1. flink内存对任务性能的影响：通过了解内存模型，了解这些模型都负责那些工作，比如用户代码使用堆，数据通讯使用直接内存等，以便能够根据任务特点针对性调整任务内存；> 2. 并发与带宽之间的关系，local模式下怎么根据带宽，设置最佳线程数；> 3. 内存监控相关命令。原创 2024-01-17 17:28:46 · 1619 阅读 · 0 评论 -
【性能调优】【离线任务】flink处理离线任务（8000个小文件？200多亿数据量？）稳定性与性能调优探索
【性能调优】【离线任务】flink处理离线任务（8000个小文件？200多亿数据量？）稳定性与性能调优原创 2023-01-09 23:43:41 · 1903 阅读 · 0 评论 -
【性能|优化】TB级flink任务报错分析：Could not compute the container Resource
【性能|优化】TB级flink任务报错分析：Could not compute the container Resource原创 2022-11-29 00:29:17 · 1934 阅读 · 2 评论 -
【架构｜概念｜性能调优】slot相关概念：Flink的job的并行度是怎么计算的。算子链与slot共享是如何优化flink资源与计算的
Flink数据模型:Operator和Stream & Job & Task和Subtask & Operator chain & Slot与Slot共享原创 2022-06-20 20:03:03 · 1046 阅读 · 1 评论