Flink
文章平均质量分 95
flink
章鱼哥TuNan&Z
追求幸福,探索未知,不卑不亢,沉稳可靠。所有技能都会因为不用而退化。避免这种损失的正确对策是使用一些类似于飞行员训练中用到的飞行模拟器那样的东西。这种模拟器让飞行员能够持续地操练所有很少用到但必须保证万无一失的技能。明智的人会终身操练他全部有用然而很少用的上的、大多数来自其他学科的技能,并把这当做事一种自我提高的责任。如果他减少了他操练的技能的种数,进而减少了他掌握的技能的种数,那么他自然会陷入“铁锤人倾向”引起的错误之中。他的学习能力也会下降,因为他需要用来理解新经验的理论框架已经出现了裂缝。对于一个善于思考的人而言,把他的技能编排成一张检查清单,并常常将这张清单派上用场,也是很重要的。
展开
-
Flink 三:Flink 流处理 API
Flink 三:Flink 流处理 API主要内容结构:1.流处理相关概念 数据的时效性 对网站的实时监控 对异常日志的监控 流式计算和批量计算 Batch Analytics 批量计算:统一收集数据-》存储到DB-》对数据进行批量处理,就是传统意义上使用类似于Map Reduce、Hive、Spark Batch等,对作业进行分析、处理、生成离线报表 Streaming Analytics流式计算:对数据流进行处理原创 2021-02-06 19:04:59 · 621 阅读 · 0 评论 -
第二章、Flink 批处理 API(正在更新)
第二章、Flink 批处理 API掌握Flink批处理SourceOperator掌握Flink批处理TransformationOperator掌握Flink批处理SinkOperator了解Flink的累加器掌握Flink的广播变量掌握Flink的分布式缓存1. API和编程模型1.1API Flink提供了多个层次的API供开发者使用,越往上抽象程度越高,使用起来越方便;越往下越底层,使用起来难度越大https://ci.apache.org/p原创 2021-01-28 23:43:00 · 661 阅读 · 0 评论 -
Flink 笔记01:安装部署与快速入门
stypora-copy-images-to: imgtypora-root-url: ./Flink 笔记01:安装部署与快速入门一、课程回安排与内容提纲大数据技术框架转折点:2017年,天猫双十一大屏展示,由以前JStorm框架变为Blink(Flink)。Flink 1.10版本,阿里将Blink中模块组件开源融合到Apache Flink中,Flink SQL模块主要就是阿里贡献。学习Flink分析引擎框架,分为2个部分讲解:1)、第一个部分、基础部分,核心点:对Flink框.原创 2021-01-28 21:58:56 · 243 阅读 · 0 评论 -
Flink 安装部署与快速入门
(一)、Flink 安装部署与快速入门(xxbj)一、flink概述1、为什么选用flink?不仅仅是一个高吞吐、低延迟的计算引擎,同时还提供很多高级的功能。:有状态的计算、支持强一致性语义以及至此基于Event Time的WaterMark对延迟或者乱序的数据进行处理2、flink组件物理部署层本地、独立集群、yarn管理集群上、云上runtime核心层该层为上层不同接口提供基础服务;也是flink分布式计算框架的核心实现层支持分布式stream作业的执行、jobgraph到ex原创 2021-01-27 20:44:07 · 1899 阅读 · 1 评论