深入浅出Flink 13 之 内存模型

本文深入探讨Flink运行流程,重点分析TaskManager间的数据传输及Flink内存管理。针对Java对象存储密度低导致的内存浪费,以及Full GC可能引发的性能问题和OOM风险,讨论如何优化内存配置以确保Flink作业的稳定性和效率。
摘要由CSDN通过智能技术生成

1.1 Flink运行流程回顾

Flink任务运行流程
在这里插入图片描述
在这里插入图片描述
Task
在这里插入图片描述

1.2 TaskManager之间的数据传输

在这里插入图片描述
在这里插入图片描述

1.3 Flink内存管理

  1. Java对象存储密度低:一个只包含boolean属性的对象占用16个字节内存:对象头占了8个,
    boolean属性占了1个,对其填充占了7个,而实际只需要一个bit(1/8字节)就够了。
  2. Full GC会极大地影响性能,尤其是为了处理更大数据而开了很大内存空间的JVM来说,GC会达到<
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值