Flink
文章平均质量分 88
养不起心爱的猫该如何是好
日常记录学习笔记
展开
-
Flink运行架构
Flink运行架构文章目录Flink运行架构一、Flink运行架构图二、组件简介1. Flink客户端2.JobManager3.TaskManager3.ResourceManager一、Flink运行架构图作业的提交、执行、管理等一系列的动作,如下图所示:二、组件简介1. Flink客户端Flink客户端用来提交Flink作业到Flink集群,在客户端中负责StreamGraph(流图)和Job Graph(作业图)的构建。使用Table API和SQL编写的Flink应用,还会在客户原创 2022-02-09 17:17:26 · 207 阅读 · 0 评论 -
Flink自主内存管理——JVM堆上内存和堆外内存的问题
系列文章目录文章目录系列文章目录前言一、JVM内存管理在大数据场景下的问题1.有效数据密度低2.垃圾回收1.OOM问题影响稳定性1.缓存未命中问题二、自主内存管理堆上内存的问题堆外内存的不足之处前言Java语言的好处是不用考虑底层,JVM可以对代码进行深度优化,对内存资源进行管理,自动回收内存。但是自动内存管理的问题在于不可控,基于JVM的大数据引擎常常会面临一个问题,即在处理海量数据的时候,如何在内存中存储大量的数据一、JVM内存管理在大数据场景下的问题1.有效数据密度低Java的原创 2022-02-09 15:44:15 · 2987 阅读 · 0 评论