FLINK笔记
FLINK笔记
肥猫64
精通\中学家教\派发传单\快递送餐\宽带安装\电脑装机\网络维护\应用开发\数据库调优\oracle\dotnet\java\python\hadoop\spark\flink\tensorflow\pytorch\ocr\nlp\模型调参\sci论文精投I
展开
-
Flink On K8s 集群原理
Flink On K8s 架构image.pngFlink 任务在 Kubernetes 上运行的步骤有:●首先往 Kubernetes 集群提交了资源描述文件后,会启动 Master 和 Worker 的 container。●Master Container 中会启动 Flink Master Process,包含 Flink-Container ResourceManag...原创 2020-06-09 19:36:57 · 673 阅读 · 0 评论 -
阿里云-流计算典型示例场景
示例原地址:https://help.aliyun.com/document_detail/65839.html?spm=a2c4g.11186623.6.788.619a7fd2VLJkh4一、电商实时PVUV- 源表结构表 1. 日志源表字段名数据类型详情account_idVARCHAR用户IDclient_ipVARCHAR客户端I...原创 2020-03-12 06:56:54 · 578 阅读 · 0 评论 -
flink 任务提交
1、standalone 集群提交: bin/flink run -c xuwei.tech.streaming.SocketWindowWordCountJavaCheckPoint FlinkExample-1.0-SNAPSHOT-jar-with-dependencies.jar -port 9001 2、yarn 集群提交 ...原创 2020-03-03 16:38:44 · 455 阅读 · 0 评论 -
Restart Strategies(重启策略)
Flink 的配置文件 flink-conf.yaml 指定。配置参数 restart-strategy ,也可以在应用代码中动态指定,会覆盖全局配置 常用的重启策略 1 固定间隔 (Fixed delay) 2 失败率 (Failure rate) 3 无重启 (No restart) 如果没有启用 ch...原创 2020-03-04 08:28:39 · 1881 阅读 · 0 评论 -
window和time操作
window 分类: 滚动、滑动 窗口分类 滚动定义:.timeWindow(Time.seconds(5)) 滑动定义:.timeWindow(Time.seconds(5),Time.seconds(1)) 自定义window win...原创 2020-03-05 08:56:21 · 1018 阅读 · 0 评论 -
state管理
state管理原创 2020-03-02 13:39:42 · 135 阅读 · 0 评论