Flink运行架构及相关命令

Flink运行架构及相关命令

最近学习了Flink,整理了一些关于flink函数框架运行和相关算子的运算方法。

flink阿里17年开始开源blink,里面融合的部分flink功能,比如flink SQL

Flink项目的理念是:“Apache Flink是为分布式、高性能、随时可用以及准确的流处理应用程序打造的开源的有状态的流处理框架”。

​ Apache Flink是一个框架分布式处理引擎,用于对无界和有界数据流进行有状态计算 。Flink被设计在所有常见的集群环境中运行,以内存执行速度任意规模来执行计算。

状态相当于历史数据。

flink可以相当于三部分来学习。

相关命令

相关运行命令

指令功能
Flink提交任务参数
flink执行任务脚本
run执行作业(ApplicationMode模式除外)
run-applicationApplicationMode模式的执行作业
-d后台运行
-m指定JobManager
-c指定全类名
-D如果要指定其它配置,可以跟在-D 后面 格式:(-D参数名=参数值)
-t指定以yarn的什么模式,yarn-per-job yarn-session yarn-application
-p提交任务时指定并行度

运行架构

在这里插入图片描述
在这里插入图片描述

  • 3
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值