Apache Flink

于 2019-12-24 09:07:05 发布 97 收藏
文章标签： flink
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/csycarrier/article/details/103677004
版权

Apache Flink(一)

Flink发展史

第一代大数据处理方案：2006年Hadoop的MapReduce-批/HDFS, 2014年9月份 apache Storm-流

第二代大数据处理方案：2014年2 Spark RDD -批处理 ，DStream - 流 （批模拟流 ）延迟高

第三代大数据处理方案：2014年12 Flink DataStream-流，Dataset- 批 吞吐量高，低延迟特点。

Flink和Spark相似采用先进的DAG模型做任务拆分完成数据的内存计算，但是Flink是一个纯流式计算引擎。不同于Spark在批处理之上构建流处理,Flink设计恰恰和Spark相反，Flink是在流计算上构建批处理。

在这里插入图片描述

帝兮小哥哥
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
  • 打赏
    打赏
  • 0
    评论
Introduction to Apache Flink
05-31
There’s a flood of interest in learning how to analyze streaming data in large-scale systems, partly because there are situations in which the time-value of data makes real-time analytics so attractive. But gathering in-the-moment insights made possible by very low- latency applications is just one of the benefits of high-performance stream processing.
官宣｜Apache Flink 1.17 发布公告
最新发布
Ververica的博客
03-23 270
Apache Flink PMC（项目管理委员）已宣布发布 Apache Flink 1.17.0。Apache Flink 是领先的流处理标准，流批统一的数据处理概念在越来越多的公司中得到认可。
Apache Flink 零基础入门（一）：基础概念解析
怀素的专栏
06-24 6718
一、Apache Flink 的定义、架构及原理 Apache Flink 是一个分布式大数据处理引擎，可对有限数据流和无限数据流进行有状态或无状态的计算，能够部署在各种集群环境，对各种规模大小的数据进行快速计算。 1. Flink Application 了解 Flink 应用开发需要先理解 Flink 的 Streams、State、Time 等基础处理语义以及 Flink 兼顾灵活性和...
精通Apache Flink读书笔记--1、2
热门推荐
lmalds的专栏
03-06 1万+
Flink Master Apache Flink
Apache Flink 简介和编程模型
Master-TJ的个人博客
06-05 7195
Apache Flink是一个同时支持分布式数据流处理和数据批处理的大数据处理系统。 Flink可以表达和执行许多类别的数据处理应用程序，包括实时数据分析，连续数据管道，历史数据处理（批处理）和迭代算法（机器学习，图表分析）以及容错的数据流。1. 简介实时流处理系统（Stream Processing System）和历史数据处理（Batch Processing System）传统上被认为是两个...
深入理解Apache Flink核心技术
CSDN 人工智能
02-18 4054
作者：李呈祥 作者简介：Intel BigData Team软件工程师，主要关注大数据计算框架与SQL引擎的性能优化，Apache Hive Committer，Apache Flink Contributor。 责任编辑：仲浩（zhonghao@csdn.net） 文章来源：《程序员》2月期 版权声明：本文为《程序员》原创文章，未经允许不得转载，订阅2016年《程...
Apache Flink从入门到放弃——Flink简介（一）
LXWalaz1s1s的博客
05-03 4227
Apache Flink是一个分布式大数据计算引擎，可以对有界的数据和无界的数据进行有状态的计算，可部署在各种集群环境中，对各种大小数据规模进行快速计算，本章节主要介绍下Flink的历史和由来以及框架基础。............
Apache Flink简介
陈海龙的格物之路
01-29 1131
主要内容包括：Flink是什么，有哪些特点，原理探究，与spark的差异等。
初识Apache+Flink
ljm13485468232的博客
07-30 96
一、什么是Apache Flink Apache Flink 是一个框架和分布式处理引擎，用于在*无边界和有边界*数据流上进行有状态的计算。Flink 能在所有常见集群环境中运行，并能以内存速度和任意规模进行计算。 二、Flink 架构中的重要方面 1、处理无界和有界数据 任何类型的数据都可以形成一种事件流。信用卡交易、传感器测量、机器日志、网站或移动应用程序上的用户交互记录，所有这些数据都形成一种流。 数据可以被作为 *无界* 或者 *有界* 流来处理。 (1)无界流 有定义流的开始，但没有.
Apache Flink 介绍
Welocme
10-21 221
Flink 什么是Flink？ Flink是一个框架和分布式处理引擎，用于对无限制和有限制的数据留进行有状态的计算。Flink被设计为可在所有常见的集群环境中运行，以内存速度和任何规模执行计算。 处理无界和有界数据 任何类型的数据都是作为事件流产生的。信用卡交易，传感器测量，机器日志或网站移动应用程序上的用户交互，所有这些数据均作为流生成。 数据可以作为无界流或有界流处理。 无界流有一个起点，但没有定义的终点。它们不会终止并在生成数据时提供数据，无界流必须被连续处理，即事件在被摄取后必须被及时处理。无法
Apache—Flink实践
蓝魔的博客
01-24 28
Apache—Flink实践
Apache Flink初体验
你的指尖有改变世界的力量
07-15 390
记录了apache flink的第一次体验
一文读懂Apache Flink技术
woliuqiangdong的博客
10-30 90
本文来自9月1日在成都举行的Apache Flink China Meetup，分享来自于云邪。 本文目录 一、Flink介绍 1.1 Flink基石 1.2 Flink API 1.3 Flink的用途 1.4 Flink Title的变化 二、Flink过去与现在 2.1 Flink High-Level API的历史变迁 2.2 Flink API的历史变迁 2.3 Flink Checkpoint & Recovery的历史变迁 2.4 Flink R.
Flink（一）—— Apache Flink 介绍
weixin_42073629的博客
10-12 476
前言 Flink 是一种流式计算框架，为什么我会接触到 Flink 呢？ 因为我目前在负责的是监控平台的告警部分，负责采集到的监控数据会直接往 kafka 里塞，然后告警这边需要从 kafka topic 里面实时读取到监控数据，并将读取到的监控数据做一些 聚合/转换/计算 等操作，然后将计算后的结果与告警规则的阈值进行比较，然后做出相应的告警措施（钉钉群、邮件、短信、电话等）。画了个简单的图如下： 目前告警这块的架构是这样的结构，刚进公司那会的时候，架构是所有的监控数据直接存在 ElasticS
带你认识Apache的顶级项目Flink！
一个有趣的人，咱们处处看！
01-16 962
注： 对于Flink呢博主也是在开始进行深度的一个学习，其次就是Flink这个框架很值得去学习，有很大的学习价值，博主也是一个00后的大数据程序员，这条路很难，但是我坚信只要努力坚持的走下去，还是会有很大的收获的。 一 flink 简介 1.1 什么是 Flink？ Apache Flink 是由 Apache 软件基金会开发的开源流处理框架，其核心是用 Java 和 Scala 编写的分布式流数据流引擎。Flink 以数据并行和流水线方式执行任意流数据程序，Flink 的 流水线运行时系统可以执行批.
2020-12-17
阿里云云栖号
12-17 723
集团关于Blink的相关使用文档已经十分齐全，这里不准备再过多赘述。这篇文章准备对Blink所基于的Apache社区开源产品–Flink的架构做一些浅显分析。 一：Flink历史、基本架构及分布式部署 历史 Flink项目最早开始于2010年由柏林技术大学、柏林洪堡大学、哈索普拉特纳研究所共同合作研发的"Stratosphere: Information Management on the Cloud"(平流层：云上的信息管理) 项目，Flink最开始是作为该项目一个分布式执行引擎的Fork，到2014年成
Apache Flink：特性、概念、组件栈、架构及原理分析
好读书，每有会意，便欣然忘食。
05-11 2503
Apache Flink是一个面向分布式数据流处理和批量数据处理的开源计算平台，它能够基于同一个Flink运行时（Flink Runtime），提供支持流处理和批处理两种类型应用的功能。现有的开源计算方案，会把流处理和批处理作为两种不同的应用类型，因为他们它们所提供的SLA是完全不相同的：流处理一般需要支持低延迟、Exactly-once保证，而批处理需要支持高吞吐、高效处理，所以在实现的时候通常

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

帝兮小哥哥

你的鼓励将是我创作的最大动力

¥2 ¥4 ¥6 ¥10 ¥20
输入1-500的整数
余额支付 (余额：-- )
扫码支付
扫码支付：¥2
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、C币套餐、付费专栏及课程。

余额充值